выполнение HTTP-запросов с помощью cURL (с использованием PROXY)

451

У меня есть этот прокси-адрес: 125.119.175.48:8909

Как я могу выполнить HTTP-запрос, используя cURL как curl http://www.example.com, но указав адрес прокси моей сети?

linux curl proxy user873286
источник

Ответы:

411

Общий способ:

export http_proxy=http://your.proxy.server:port/

Затем вы можете подключиться через прокси из (многих) приложений.

И, согласно комментарию ниже, для https:

export https_proxy=https://your.proxy.server:port/
airween
источник
76
Когда вам нужен прокси HTTPS-трафик, переменная окружения должна быть в верхнем регистре: HTTPS_PROXY
phatblat
18
Из справочных страниц Переменные среды могут быть указаны в нижнем или верхнем регистре. Версия в нижнем регистре имеет приоритет. http_proxy является исключением, поскольку он доступен только в нижнем регистре. Использование переменной окружения для установки прокси имеет тот же эффект, что и опция --proxy.
Капитан Лептон
@BipinVayalu, что вы хотите проверить? Таким образом, как я описал выше, клиент использует прокси «прямой путь», а не прозрачно. Итак, прокси выдает стандартные HTTP-ответы (включая HTTP-коды). Если вы экспортируете неправильную переменную среды http_proxy (например, плохой порт ...), клиент не сможет подключиться к этому, и он выдаст сообщение об ошибке: «Предупреждение! Не удалось подключиться к удаленному хосту!», Или что-то подобное - просто попробовать :)
airween
15
Если вы проверите исходный код curl, вы увидите в url.c (строка 4337 в версии 7.39), что они проверяют наличие строчной версии, а если они не могут ее найти, проверяют наличие заглавной буквы.
Raistmaj
1
Большинство пользователей прислали мне исправление, теперь я им поделюсь. Если вы хотите использовать HTTPS-соединение через прокси-сервер, то вам следует сделать следующее: export https_proxy = your.proxy.server: port Обратите внимание, что в схеме URL есть протокол http, а не httpS!
airween
664

От man curl:

-x, --proxy <[protocol://][user:password@]proxyhost[:port]>

     Use the specified HTTP proxy. 
     If the port number is not specified, it is assumed at port 1080.
Карл Баркер
источник
curl: (7) не удалось подключиться к хосту curl: (7) не удалось подключиться к хосту
user873286
Я получаю вышеуказанную ошибку при запуске этой команды: curl -x, --proxy 122.72.2.200:80 mysite.com/test.php?id=1
user873286
61
«-x, --proxy» означает, что можно использовать любой из них. Команда должна быть либо "curl -x 122.72.2.200:80 mysite.com/test.php?id=1 ", либо "curl --proxy 122.72.2.200:80 mysite.com/test.php?id=1 "
IBBoard
8
Документы указаны правильно, как указано выше, однако имя пользователя и пароль должны быть указаны по-разному:-x user:password@proxyhost:port
Ed Chapel
Спасибо за лучший ответ!
haotang
128

Вышеуказанные решения могут не работать с некоторыми версиями curl, которые я пробовал для себя (curl 7.22.0). Но то, что работало для меня, было:

curl -x http://proxy_server:proxy_port --proxy-user username:password -L http://url

Надеюсь, это решит проблему лучше!

Амар
источник
Если столкнуться с той же проблемой, локон Debian Wheezy все еще не поддерживает трюк env
hyperknot
Получил это вместо[1] 4812
Aminah Nuraini
80

Помните, что если вы используете прокси-сервер SOCKS вместо HTTP / HTTPS-прокси, вам нужно будет использовать --socks5вместо этого переключатель:

curl --socks5 125.119.175.48:8909 http://example.com/

Вы также можете использовать --socks5-hostnameвместо --socks5разрешения DNS на стороне прокси.

Филипе Коррейя
источник
6
Это не сработало для меня, но с помощью --socks5-hostnameсделал.
Михал Рыбак
2
@ MichałRybak, который будет работать так же, но разрешит DNS на стороне прокси. Смотрите man-страницу для более подробной информации.
Филипе Коррейя
3
curl https://api.ipify.org --proxy socks5://189.100.246.182:37339кажется, работает нормально для меня. Есть --proxyвариант в некотором роде уступает --socks5при использовании SOCKS5 прокси?
@ user993683 Это зависит от версии. --proxyэто, вероятно, то, что вы хотите, сейчас, но это не всегда поддерживается. Также обратите внимание, что socks5://и socks5h://выполните разрешение имени хоста (DNS) до и после подключения к прокси, соответственно.
Майкл - Где Клэй Ширки
51

в качестве дополнения к airween, еще одна хорошая идея - добавить это в ваш .bashrc, чтобы вы могли переключаться с непрокси-среды на прокси-среду: 

alias proxyon="export http_proxy='http://YOURPROXY:YOURPORT';export https_proxy='http://YOURPROXY:YOURPORT'"
alias proxyoff="export http_proxy='';export https_proxy=''"

WHERE YOURPROXY: YOURPORT это именно то, ваш IP и прокси порта :-).

Затем просто делать

proxyon

ваша система начнет использовать прокси, и наоборот:

proxyoff
Алехандро Морено
источник
34

используйте следующее

curl -I -x 192.168.X.X:XX http://google.com

192.168.X.X:XX поставить свой прокси-сервер ip и порт.

-v В подробном режиме он даст больше деталей, включая заголовки и ответ.

13krn
источник
2
Это должно быть ответом. Не каждый хочет указывать глобальную переменную (экспорт) для каждого HTTP-запроса, выполняемого каждым HTTP-клиентом на вашем хосте. Этот вариант дает большую гибкость, ИМХО.
ivanleoncz
Это так полезно, когда вы пытаетесь использовать разные прокси для URL. Спасибо.
redAce
29

ты можешь использовать :

curl http://www.example.com --proxy http://125.119.175.48:8909

как объяснил Карл

smitkpatel
источник
26
«как объяснил Карл», что означает, что этот ответ не лучше, чем копия этого ответа.
Raedwald
26

Мне нравится использовать это для того, чтобы получить IP, под которым я вижу

curl -x http://proxy_server:proxy_port https://api.ipify.org?format=json && echo

Надеюсь, это кому-нибудь поможет.

bmetge
источник
19

Поскольку curlвы можете настроить прокси в своем ~/.curlrc( _curlrcв Windows) файле, добавив proxyзначение, синтаксис:

proxy = http://username:password@proxy-host:port
kenorb
источник
Это оно! Сконфигурировал настройку прокси несколько лет назад в этом файле и удивился сегодня, почему curl больше не работает, теперь адрес прокси изменился, и все env переменные настроены правильно. Спасибо за это!
emale
15

Просто суммируя все замечательные упомянутые ответы:

curl -x http://<user>:<pass>@<proxyhost>:<port>/ -o <filename> -L <link>
М. Машай
источник
8

С прокси с аутентификацией я использую:

curl -x <protocol>://<user>:<password>@<host>:<port> --proxy-anyauth <url>

потому что я не знаю, почему curl не использует / перехватывает переменные окружения http [s] _proxy .

Педро Р. Санчес А.
источник
6 
C:\Desktop>curl --head https://www.google.com/ --proxy 1.1.1.1:8080
Debashish Saha
источник
6
Попробуйте добавить объяснение к вашему решению.
Почмурник
3

Вам не нужно экспортировать http[s]_proxyпеременную оболочки, если вы просто устанавливаете прокси для команды off. например

http_proxy=http://your.proxy.server:port curl http://www.example.com

Тем не менее, я бы предпочел, curl -xесли бы я знал, что я всегда буду использовать прокси.

overthink
источник
2

В зависимости от вашего рабочего места вам также может потребоваться указать параметр -kили --insecureпараметр curl, чтобы устранить возможные проблемы с сертификатами CA.

curl -x <myCompanyProxy>:<port> -k -O -L <link to file to download>
Мэтт Леглер
источник
1 
sudo curl -x http://10.1.1.50:8080/ -fsSL https://download.docker.com/linux/ubuntu/gpg

У меня это отлично сработало, ошибка возникает из-за того, что curl нужно установить прокси

Помните, замените прокси на ваш прокси, мой «пример» был http://10.1.1.50:8080/ .

IbarMario
источник
0

В случае, если прокси использует автоматический прокси с файлом PAC. Мы можем найти фактический прокси из javascript из URL PAC.

И если прокси-сервер нуждается в аутентификации, мы можем сначала использовать обычный веб-браузер для доступа к сайту, который будет продвигать диалог аутентификации. После аутентификации мы можем использовать wireshark для перехвата отправок пакета http на прокси-сервер, из пакета http мы можем получить токен аутентификации из заголовка http: Proxy-Authorization

Затем мы можем установить переменную среды http_proxy, а также включить токен авторизации в заголовок http: Proxy-Authorization

экспорт http_proxy = http: // proxyserver: порт

curl -H "Прокси-авторизация: xxxx" http: // targetURL

Цзяну Чен
источник