php的curl可以模擬ip,curl_init php

本文目錄一覽：

• 1、php的CURL能夠偽造IP嗎
• 2、關於phpCURL使用ip代理伺服器抓取頁面的問題
• 3、怎樣用php中的curl模擬登陸
• 4、php爬蟲程序中怎麼樣偽造ip地址防止被封
• 5、多IP伺服器，用php里的curl如何指定ip出口
• 6、php中什麼是curl會話？？是用來做什麼的？有什麼作用？

php的CURL能夠偽造IP嗎

掛代理後php端獲得到地真實ip應該是代理ip地址。

remote_addr是模仿不鳥滴。。

關於phpCURL使用ip代理伺服器抓取頁面的問題

$curl = curl_init ();

curl_setopt ( $curl, CURLOPT_URL, 需要抓取的url地址 );

curl_setopt ( $curl, CURLOPT_HEADER, 0 );

curl_setopt ( $curl, CURLOPT_RETURNTRANSFER, 1 ); // 禁止調用時就輸出獲取到的數據

curl_setopt ( $curl, CURLOPT_FOLLOWLOCATION, 1 );

curl_setopt ( $curl, CURLOPT_SSL_VERIFYPEER, false );

curl_setopt ( $curl, CURLOPT_SSL_VERIFYHOST, false );

// curl_setopt($ch,CURLOPT_TIMEOUT,20);//10秒

// curl_setopt($ch,CURLOPT_CONNECTTIMEOUT,20);//10秒

// curl_setopt($ch, CURLOPT_REFERER, $collectConfigArray [‘refererUrl’]);

$collectHtml = curl_exec ( $curl );

echo $collectHtml;

unset ( $curl );

curl_close ( $ch );

怎樣用php中的curl模擬登陸

在我的博客《PHP cURL模擬登錄與採集分析過程詳解》做了詳細的介紹，步驟有：

1. 訪問目標網站

2. 打開Firebug（快捷鍵：F12）

3. 清除【Cookie】

4. 重新訪問目標網站

5. 設置【網路】為[保持]狀態

6. 填寫表單，提交登錄請求

7. 利用【網路】，分析提交信息

8. 複製請求的cURL命令

9. 分析命令傳輸的參數與Cookie和前面頁面響應內容的關聯性

10. 如果遇到Cookie和響應內容都無法查找到的參數，Ctrl+S保存當前頁面為全部，利用文本搜索該參數的位置

11. 利用cURL命令組裝模擬登錄程序

詳情請參考博客內容：

php爬蟲程序中怎麼樣偽造ip地址防止被封

1、國內ADSL是王道，多申請些線路，分布在多個不同的電信區局，能跨省跨市更好，自己寫好斷線重撥組件，自己寫動態IP追蹤服務，遠程硬體重置（主要針對ADSL貓，防止其宕機），其餘的任務分配，數據回收~

2、1.IP必須需要，，ADSL。如果有條件，其實可以跟機房多申請外網IP。

2.在有外網IP的機器上，部署代理伺服器。

3.你的程序，使用輪訓替換代理伺服器來訪問想要採集的網站。

3、ADSL + 腳本，監測是否被封，然後不斷切換 ip

設置查詢頻率限制

正統的做法是調用該網站提供的服務介面。

4、

1 user agent 偽裝和輪換

2 使用代理 ip 和輪換

3 cookies 的處理，有的網站對登陸用戶政策寬鬆些

友情提示：考慮爬蟲給人家網站帶來的負擔，be a responsible crawler

5、

儘可能的模擬用戶行為：

1、UserAgent經常換一換；

2、訪問時間間隔設長一點，訪問時間設置為隨機數；

3、訪問頁面的順序也可以隨機著來

6、

1. 對爬蟲抓取進行壓力控制；

2. 可以考慮使用代理的方式訪問目標站點。

-降低抓取頻率，時間設置長一些，訪問時間採用隨機數

-頻繁切換UserAgent（模擬瀏覽器訪問）

-多頁面數據，隨機訪問然後抓取數據

-更換用戶IP

多IP伺服器，用php里的curl如何指定ip出口

Swoole可以廣泛應用於互聯網、移動通信、企業軟體、網路遊戲、物聯網、車聯網、智能家庭等領域。 使用PHP+Swoole作為網路通信框架，可以使企業IT研發團隊的效率大大提升，更加專註於開發創新產品。

Swoole底層內置了非同步非阻塞、多線程的網路IO伺服器。PHP程序員僅需處理事件回調即可，無需關心底層。與Nginx/Tornado/Node.js等全非同步的框架不同，Swoole既支持全非同步，也支持同步。

php中什麼是curl會話？？是用來做什麼的？有什麼作用？

curl 就是模擬瀏覽器請求的，比如獲取獲取遠程的網頁，雖然可以使用file_get_content函數 但是 curl支持cookie 自定義瀏覽器類型，來源 ip等等。