19.11.2026
как использовать прокси в python requests
Как использовать прокси в Python requests: пошаговая инструкция
Если вы занимаетесь веб-скрапингом, автоматизацией или просто хотите повысить уровень анонимности в интернете, то использование прокси — ваш надежный помощник. В этой статье я расскажу, как легко и быстро настроить работу с прокси в Python с помощью популярной библиотеки requests.
Почему стоит использовать прокси?
Прокси-серверы помогают скрыть ваш реальный IP-адрес, обходить геоограничения и защищают от блокировок при большом количестве запросов. Особенно это актуально, если вы автоматизируете сбор данных или работаете с сайтами, которые активно борются с парсерами.
Как использовать прокси в requests: базовая настройка
Библиотека requests — одна из самых популярных для работы с HTTP-запросами. Чтобы подключить прокси, нужно задать параметр proxies. Вот минимальный пример:
import requests
proxies = {
'http': 'http://user:password@proxyserver:port',
'https': 'https://user:password@proxyserver:port',
}
response = requests.get('https://example.com', proxies=proxies)
print(response.text)
В этом примере вы указываете адрес прокси-сервера для протоколов HTTP и HTTPS. Если прокси без авторизации, просто опустите user:password@.
Где взять прокси?
В интернете есть множество бесплатных и платных прокси. Бесплатные часто медленнее и менее надежны, зато их легче тестировать. Для профессиональных целей лучше выбрать платный сервис, где обеспечивается стабильность и анонимность.
Важные нюансы
- Тип прокси: HTTP, HTTPS, SOCKS4 или SOCKS5. В
requestsпо умолчанию работают только с HTTP и HTTPS. Для SOCKS потребуется дополнительная библиотека, например,PySocks. - Авторизация: если прокси требует логин и пароль, указывайте их в URL.
- Обработка ошибок: при использовании прокси могут возникать тайм-ауты или ошибки соединения. Оберните запросы в
try-except.
Использование SOCKS-прокси
Если вы хотите использовать SOCKS-прокси (часто они более анонимны), потребуется установить PySocks:
pip install requests[socks]
Пример:
import requests
proxies = {
'http': 'socks5://user:password@proxyserver:port',
'https': 'socks5://user:password@proxyserver:port',
}
response = requests.get('https://example.com', proxies=proxies)
print(response.text)
Автоматизация и ротация прокси
При больших объемах запросов важно менять прокси, чтобы не попасть под блокировку. Можно создавать список прокси и перебирать их по очереди:
proxies_list = [
'http://proxy1:port',
'http://proxy2:port',
'http://proxy3:port',
]
for proxy in proxies_list:
try:
response = requests.get('https://example.com', proxies={'http': proxy, 'https': proxy}, timeout=5)
print(f'Используется прокси: {proxy}')
print(response.status_code)
break # если успешно — прерываем цикл
except requests.RequestException:
print(f'Прокси {proxy} не работает, пробуем следующий...')
Итог
Использование прокси в Python requests — это просто, если знать основные принципы. Главное — правильно выбрать тип прокси, настроить параметры и быть готовым к обработке ошибок. Так вы сможете повысить свою анонимность, обходить блокировки и автоматизировать сбор данных без лишних проблем.