Python Requests Proxy詳解

一、簡介

Python Requests是HTTP庫中的佼佼者，它可以讓我們輕易地使用HTTP請求。在網絡操作中，代理經常會被用到。Python的Requests庫也提供了代理的支持。

二、什麼是Proxy?

代理服務器是一種網絡服務器，它充當位於客戶端和 Internet 之間的中介服務器。代理服務器從客戶端獲取請求並將其轉發到服務器，在客戶端和服務器之間建立了一條連接。每次請求都可以有代理服務器來處理。

三、如何使用Proxy？

通過requests庫，用戶可以在發起請求時添加proxies參數以實現代理訪問。

import requests

proxies = {
  'http': 'http://proxy.example.com:8080',
  'https': 'http://proxy.example.com:8080',
}

response = requests.get('http://example.com', proxies=proxies)

四、更多Proxy的使用方式

1. Proxy的認證

當代理服務器需要用戶認證時，可以使用HTTPBasicAuth或其他認證方法。

import requests
from requests.auth import HTTPBasicAuth

proxy_auth = HTTPBasicAuth('username', 'password')
proxies = {'http': 'http://proxy.example.com:8080/'}

response = requests.get('http://example.com', proxies=proxies, auth=proxy_auth)

2. Proxy的選擇

如果多個代理可供選擇，可以設置優先級，程序會按順序嘗試連接所有代理。

import requests

proxies = {
    'http': 'http://proxy1.example.com:3128',
    'https': 'http://proxy2.example.com:3128',
    'ftp': 'http://proxy3.example.com:3128'
}

response = requests.get('http://example.com', proxies=proxies)

3. 通過環境變量設置代理

通過HTTP_PROXY 和 HTTPS_PROXY 環境變量，可以在整個系統中設置默認代理。

import requests
import os

proxy = os.environ.get('http_proxy')
proxies = {
    'http': proxy,
    'https': proxy,
}

response = requests.get('http://example.com', proxies=proxies)

4. Proxy的添加與刪除

可以通過session對象來添加或者刪除Proxy。

import requests

session = requests.Session()
session.proxies.update({'http': 'http://proxy.example.com:3128'})
response1 = session.get('http://example.com')
session.proxies.pop('http')
response2 = session.get('http://example.com')

五、Exception Handling

在使用Proxy時，要注意可能會發生的錯誤。如果代理服務器不可訪問，或者認證失敗，則程序會拋出異常。

import requests

proxy = {
    'http': 'http://proxy.example.com:3128',
}
try:
    response = requests.get('http://example.com', proxies=proxy)
except requests.exceptions.RequestException as e:
    print(e)

六、總結

Python Requests Proxy是一個功能強大，同時也容易使用的庫。通過使用它，我們可以輕鬆地配置代理服務器並發起請求。同時也要注意代理的異常處理問題。