使用Python的requests庫進行網路請求

在進行網路開發或者爬蟲方面的時候,我們經常需要發送網路請求,而Python的requests庫可以方便地完成這項任務。requests是一個Python的HTTP庫,它允許我們以人類可讀的方式向網站發送請求,並用Python解析響應。使用requests庫,我們可以做到發送HTTP/1.1和HTTP/2請求,支持國際域名和IDNA,會話保持,瀏覽器式身份驗證,支持壓縮和身份驗證等等。下面我們將詳細介紹requests庫的用法。

一、發送基本的HTTP請求

發送HTTP請求是requests庫的主要功能之一。我們可以使用requests.get方法向指定的URL發送get請求,請求並返回伺服器響應,用法如下:

import requests

response = requests.get('https://www.baidu.com/')
print(response.status_code)
print(response.text)

response.status_code是響應狀態碼(例如200表示成功,404表示未找到,500表示伺服器錯誤等),response.text是響應的內容。請求成功後,我們可以通過response.text查看響應結果,例如百度首頁的HTML代碼。

二、發送帶參數的HTTP請求

有時候,我們需要發送包含參數的請求,這可以通過給requests.get方法傳遞params參數來實現,示例如下:

import requests

payload = {'key1': 'value1', 'key2': 'value2'}
response = requests.get('https://httpbin.org/get', params=payload)
print(response.url)
print(response.text)

上面的代碼中,我們給get方法傳遞一個參數字典payload,然後requests會自動將參數組裝成url,最後輸出response.url和response.text。我們可以看到,response.url顯示的是帶參數的URL,response.text包含了HTTP響應的正文。

三、發送POST請求

requests庫也支持發送POST請求,用法跟發送GET請求很像。我們只需要通過requests.post方法傳遞需要POST的數據即可,代碼如下:

import requests

payload = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://httpbin.org/post', data=payload)
print(response.text)

我們把需要POST的數據定義成字典payload,然後通過data參數傳遞給post方法即可。最後輸出響應結果,這裡我們可以看到http://httpbin.org/post站點返回的結果,包含了我們POST數據的內容。

四、設置請求頭部信息

在進行HTTP通信是,包含的請求和響應信息都是通過請求頭部信息來傳遞的。requests請求方法中可以設置headers參數來自定義請求頭部信息。

import requests

headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/98.0.4758.102 Safari/537.36'
}
response = requests.get('https://www.baidu.com/', headers=headers)
print(response.text)

我們可以自定義User-Agent來發送請求,從而模擬瀏覽器發起請求。這裡我們使用了谷歌瀏覽器作為User-Agent,百度會以為我們是使用Chrome瀏覽器訪問百度網站,於是返回了相應內容。

五、錯誤處理

人工編寫的HTTP客戶端通常需要考慮與伺服器的不良或失敗交互。requests庫內置了一個明確的異常層次結構,用於處理請求和響應所發生的常見異常,例如連接超時等。

import requests

try:
    response = requests.get('https://httpbin.org/get', timeout=0.1)
    print(response.status_code)
except requests.exceptions.Timeout:
    print('請求超時了')

我們可以在請求過程中添加timeout參數來設置超時時間。如果請求超過指定的超時時間,就會拋出requests.exceptions.Timeout異常,我們可以通過try/except對它進行捕獲並進行相應的處理。

原創文章,作者:小藍,如若轉載,請註明出處:https://www.506064.com/zh-tw/n/242807.html

(0)
打賞 微信掃一掃 微信掃一掃 支付寶掃一掃 支付寶掃一掃
小藍的頭像小藍
上一篇 2024-12-12 12:52
下一篇 2024-12-12 12:52

相關推薦

  • Python計算陽曆日期對應周幾

    本文介紹如何通過Python計算任意陽曆日期對應周幾。 一、獲取日期 獲取日期可以通過Python內置的模塊datetime實現,示例代碼如下: from datetime imp…

    編程 2025-04-29
  • Python列表中負數的個數

    Python列表是一個有序的集合,可以存儲多個不同類型的元素。而負數是指小於0的整數。在Python列表中,我們想要找到負數的個數,可以通過以下幾個方面進行實現。 一、使用循環遍歷…

    編程 2025-04-29
  • Python周杰倫代碼用法介紹

    本文將從多個方面對Python周杰倫代碼進行詳細的闡述。 一、代碼介紹 from urllib.request import urlopen from bs4 import Bea…

    編程 2025-04-29
  • 如何查看Anaconda中Python路徑

    對Anaconda中Python路徑即conda環境的查看進行詳細的闡述。 一、使用命令行查看 1、在Windows系統中,可以使用命令提示符(cmd)或者Anaconda Pro…

    編程 2025-04-29
  • Python中引入上一級目錄中函數

    Python中經常需要調用其他文件夾中的模塊或函數,其中一個常見的操作是引入上一級目錄中的函數。在此,我們將從多個角度詳細解釋如何在Python中引入上一級目錄的函數。 一、加入環…

    編程 2025-04-29
  • python強行終止程序快捷鍵

    本文將從多個方面對python強行終止程序快捷鍵進行詳細闡述,並提供相應代碼示例。 一、Ctrl+C快捷鍵 Ctrl+C快捷鍵是在終端中經常用來強行終止運行的程序。當你在終端中運行…

    編程 2025-04-29
  • Python清華鏡像下載

    Python清華鏡像是一個高質量的Python開發資源鏡像站,提供了Python及其相關的開發工具、框架和文檔的下載服務。本文將從以下幾個方面對Python清華鏡像下載進行詳細的闡…

    編程 2025-04-29
  • Python程序需要編譯才能執行

    Python 被廣泛應用於數據分析、人工智慧、科學計算等領域,它的靈活性和簡單易學的性質使得越來越多的人喜歡使用 Python 進行編程。然而,在 Python 中程序執行的方式不…

    編程 2025-04-29
  • 蝴蝶優化演算法Python版

    蝴蝶優化演算法是一種基於仿生學的優化演算法,模仿自然界中的蝴蝶進行搜索。它可以應用於多個領域的優化問題,包括數學優化、工程問題、機器學習等。本文將從多個方面對蝴蝶優化演算法Python版…

    編程 2025-04-29
  • Python字典去重複工具

    使用Python語言編寫字典去重複工具,可幫助用戶快速去重複。 一、字典去重複工具的需求 在使用Python編寫程序時,我們經常需要處理數據文件,其中包含了大量的重複數據。為了方便…

    編程 2025-04-29

發表回復

登錄後才能評論