使用Python的requests庫發送網絡請求

一、requests庫的簡介

requests是一個Python第三方庫，用於向網站發送HTTP請求。它可以替代內置的urllib庫，使得發送網絡請求更加簡單方便。requests庫完美支持HTTP/1.1和HTTPS，並且支持連接池、cookie，通用連接等功能。

requests庫對HTTP請求的封裝給Python中的網絡編程帶來了一種更簡潔、更方便的編程方式。在進行HTTP請求時，大部分用戶會使用requests庫，因為requests庫可以讓複雜的HTTP請求變得輕而易舉。

二、requests庫的安裝

使用requests庫發送HTTP請求必須先進行安裝，推薦使用pip進行安裝。使用pip安裝requests庫的方法如下：

    pip install requests

如果你沒有安裝pip，可以在命令提示符或終端窗口運行以下命令進行安裝：

    easy_install pip

三、發送HTTP請求

1、發送GET請求

發送GET請求最常用的方法是requests.get()方法。requests.get()方法需要傳入一個URL參數，它會將URL發送給服務器，並返回一個response對象，使用response對象的方法，可以對HTTP響應進行操作。

以下代碼示例演示如何使用requests庫發送get請求：

    import requests

    url = 'https://www.example.com'
    response = requests.get(url)

    print(response.text)

上述代碼中，我們使用requests.get()方法獲取URL的響應內容，並通過response.text輸出響應內容到控制台。

在實際應用中，我們可能需要給URL添加請求頭，設置代理，添加cookie等。requests庫的接口都非常易於使用，讓我們可以輕鬆地完成這些任務。

2、發送POST請求

在發送POST請求時，我們需要指定提交的數據。requests庫的post()方法可以傳遞一個字典對象，該對象包含提交的數據。以下是一個發送POST請求的示例：

    import requests

    url = 'https://www.example.com/login'
    data = {'username':'myusername', 'password':'mypassword'}
    response = requests.post(url, data=data)

    print(response.text)

上述代碼會將地址為’https://www.example.com/login’的POST請求提交給服務器，並將用戶名和密碼作為數據發送。如果登錄成功，服務器將返回一個跳轉地址，可以通過response.headers[‘Location’]來獲取跳轉地址。

3、自定義請求頭

在發送HTTP請求時，服務器會檢查請求頭中的一些信息，例如User-Agent信息，這可以讓服務器了解你是通過瀏覽器還是爬蟲發送HTTP請求。如果檢測到某些不正常的情況，服務器可能會拒絕你的請求。

requests庫允許我們修改請求頭。在請求頭中添加特定的User-Agent頭可以讓請求看起來更像一個正常的瀏覽器請求。下面是一個設置User-Agent頭的示例：

    import requests

    url = 'https://www.example.com'
    headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36'}
    response = requests.get(url, headers=headers)

    print(response.text)

上述代碼中，我們將一個User-Agent頭添加到了請求頭中，讓請求看起來更像一個正常的瀏覽器請求。

4、代理設置

requests庫也支持代理設置。可以通過proxies參數指定一個代理服務器，以在發送HTTP請求時自動轉髮網絡請求。以下是一個設置代理的示例：

    import requests

    url = 'https://www.example.com'
    proxies = {'http' : 'http://myproxy.example.com:1234',
                'https': 'http://myproxy.example.com:1234'}
    response = requests.get(url, proxies=proxies)

    print(response.text)

上述代碼中，我們指定了一個HTTP和HTTPS代理服務器，用於轉髮網絡請求。

四、總結

requests庫是一個非常強大的Python庫，可以幫你方便地發送任何類型的HTTP請求，並且支持cookie、代理、SSL配置、設置請求頭等功能。它比Python的內置urllib庫更為易用、靈活，受到了廣泛的歡迎。

在編寫網絡應用程序時，requests庫會是你不可或缺的工具。