使用Python進行Get請求

一、為什麼要使用Python進行Get請求

Get請求指的是通過HTTP協議向伺服器請求數據的方式，它可以通過URL傳遞參數，比如搜索引擎中的關鍵詞，在網路爬蟲中獲取網頁數據等。使用Python進行Get請求有以下幾個優勢：

1、Python是一門簡單易學的編程語言，通過Python可以使用已經封裝好的第三方庫來簡便地完成Get請求的操作。

2、Python擁有豐富的網路庫，比如requests、urllib等，它們都可以實現Get請求，這使得Python在網路爬蟲等方面具有非常高的應用價值。

3、使用Python進行Get請求比手動在瀏覽器地址欄中輸入URL更加高效，可以節省大量時間和精力。

二、使用requests庫進行Get請求

requests是Python中最廣泛使用的網路請求庫之一。使用requests可以輕鬆創建並發送Get請求，實例如下：

import requests

url = "https://www.baidu.com/s"
payload = {'wd': 'Python'}
r = requests.get(url, params=payload)

print(r.url)
print(r.content.decode())

在上述代碼中，我們首先導入requests庫，然後定義請求的URL（這裡以百度搜索為例），並在payload參數中傳遞了搜索關鍵詞，最後使用get方法進行請求。

get方法會返回一個Response對象，我們可以通過調用r.url和r.content屬性來分別查看請求的URL和返回的網頁內容。

三、使用urllib庫進行Get請求

urllib是Python標準庫中的一個網路請求庫，與requests相比，它更加基礎，但在一些簡單的網路請求場景中也是非常實用的。下面是一個使用urllib進行Get請求的實例：

from urllib import request, parse

url = "https://www.baidu.com/s"
payload = {'wd': 'Python'}
url_values = parse.urlencode(payload)
full_url = url + '?' + url_values
req = request.urlopen(full_url)

print(req.geturl())
print(req.read().decode())

在上述代碼中，我們使用了urllib.parse庫來將請求參數轉換為URL的查詢字元串，然後使用urlopen方法發送Get請求，並通過調用geturl和read方法獲取請求的URL和返回的網頁內容。

四、使用Proxy進行Get請求

在實際的開發中，我們有時需要使用代理伺服器來進行網路請求，比如需要訪問外網但是又被牆了，或者需要訪問一些只有內網才能訪問的資源等。requests和urllib庫都提供了非常方便的方式來設置代理伺服器：

import requests

proxies = {
  "http": "http://10.10.1.10:3128",
  "https": "http://10.10.1.10:1080",
}

r = requests.get("http://example.com", proxies=proxies)

print(r.content.decode())

在上述代碼中，我們定義了一個字典proxies，其中包含http和https兩個鍵值對，分別對應我們使用的代理伺服器的協議和地址。然後將proxies參數傳遞給requests.get方法即可。

五、使用Cookie進行Get請求

在有些情況下，我們需要向伺服器發送Cookie信息，以便伺服器能夠正確地處理我們的請求。比如在模擬登錄過程中，我們需要將登錄後的Cookie信息帶上，才能在之後的請求中正確地訪問相關資源。requests庫提供了非常方便的方式來設置Cookie：

import requests

cookies = {
    'name': 'value',
    'name2': 'value2',
}
 
r = requests.get('http://httpbin.org/cookies', cookies=cookies)
 
print(r.text)

在上述代碼中，我們定義了一個字典cookies，其中包含了我們要發送的Cookie信息。然後將cookies參數傳遞給requests.get方法即可。