curl轉pythonrequests的簡單介紹

本文目錄一覽：

• 1、請教python requests.post()請求一個第三方接口的問題返回中文亂碼的問題
• 2、基於cURL命令行工具進行測試
• 3、pythoncurl命令報curl
• 4、怎麼把這個 curl 命令用 python requests 搞定
• 5、如何利用cURL和python對服務端和web端進行接口測試
• 6、R語言中，RCurl優勢在哪兒，做爬蟲的話用Python還是RCurl效率高

請教python requests.post()請求一個第三方接口的問題返回中文亂碼的問題

需要一個轉碼和解碼，因為文件內部編碼不同，所以輸出來是亂碼。代碼如下：

txt=requests.post(url)

mytxt=txt.text.encode(‘iso-8859-1’).decode(‘utf-8’)

基於cURL命令行工具進行測試

cURL是常用的命令行操作工具，我們會用這個命令必須要進行Account API的調用。cURL只能發起API調用，本身並不具備結果驗證能力。

比如curl -i -H “Accept:application/json” -X GET ” “

其中命令行參數：

-i：說明顯示response的header信息

-H：用於設定request的header

-X：用於指定執行的方法，使用了GET方法，其他常見的方法還有POST、PUT、DELETE等，如果不知道-X，默認方法是GET。

-d：用於設定http參數，http參數可以直接加在URL的query string,也可以用-d帶入參數，參數之間可用串接，或使用多個-d

-b:傳遞cookie時，用於指定cookie文件的路徑

session記錄使用者登入信息，後端會傳一個session ID給前端，前端在發給後端的requests的header中就需要設置此session ID,後端便會以此session ID識別出前端是屬於具體哪個session.

curl -i -H “sessionid:XXXX” -X GET “”

使用cookie,認證成功後，後端會返回cookie給前端，前端可以把該cookie保存成為文件，當需要再次使用該cookie時，再用 -b cookie_file 的方式在request中植入cookie既可正常使用

將cookie保存為文件：

curl -i -X POST -d username=robin -d password=password123 -c ~/cookie.txt “”

載入cookie到request中：

curl -i -H “Accept:application/json” -X GET -b ~/cookie.txt “”

pythoncurl命令報curl

語法錯誤或者插件不存在。

Python curl命令報curl是指在Python程序中使用curl命令時出現了錯誤. curl是一種命令行工具, 可以用來發送網絡請求, 獲取網絡數據. 在Python程序中, 可以使用os模塊的os.system()函數來執行curl命令. 例如:

Copy code

import os

# 執行curl命令

os.system(“curl “)

如果Python curl命令報curl錯誤, 可能是因為程序中存在語法錯誤, curl命令語法不正確, 或者系統中沒有安裝curl命令. 您可以檢查程序的語法, 確認curl命令的語法是否正確, 並檢查

怎麼把這個 curl 命令用 python requests 搞定

import httplib

import json

p = { “method” : “test”, “params” : [ { “detail” : “Hello_world”} ] }

headers = {“Content-type”:”application/x-www-form-urlencoded”,”Accept”:”text/plain”}

conn = httplib.HTTPConnection(“127.0.0.1”, 8081)

conn.request(“POST”,””, json.dumps(p), headers)

如何利用cURL和python對服務端和web端進行接口測試

template int Graph::GetVertexPosTable(const NameType vertexname) { for (int i=0; i this-m_numVertexs; i++) { if (vertexname == m_pVertexTable[i].m_vertexName) { return i; } } return -1; }

R語言中，RCurl優勢在哪兒，做爬蟲的話用Python還是RCurl效率高

Python 用requests + BeautifulSoup 很方便。

【Step1】獲取html：

import requests

r = requests.get(『』)

html = r.text #這樣3行代碼就把網頁的html取出來了

【Step2】解析：

html用你喜歡的方式解析就可以了，牛逼的話可以直接正則。

from bs4 import BeautifulSoup

soup = BeautifulSoup(html) #這樣2行就可以很方便的操作soup解析了

或者專業點的用scrapy爬蟲框架，默認用xpath解析。