python中cpamie類包的簡單介紹

本文目錄一覽:

怎麼用python抓取網頁並實現一些提交操作?

下面這個程序是抓取網頁的一個例子,MyOpener類是為了模擬瀏覽器客戶端,並採用隨機選取的方式以防網站將你認為是機器人。

MyFunc函數抓取你指定的url,並提取了其中的href鏈接,圖片的獲取類似,一般是img src=xxx這樣的形式,其他的功能應該也不難,去網上搜下應該有些例子。

import re

from urllib import FancyURLopener

from random import choice

user_agents = [

‘Mozilla/5.0 (Windows; U; Windows NT 5.1; it; rv:1.8.1.11) Gecko/20071127 Firefox/2.0.0.11’,

‘Opera/9.25 (Windows NT 5.1; U; en)’,

‘Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)’,

‘Mozilla/5.0 (compatible; Konqueror/3.5; Linux) KHTML/3.5.5 (like Gecko) (Kubuntu)’,

‘Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.8.0.12) Gecko/20070731 Ubuntu/dapper-security Firefox/1.5.0.12’,

‘Lynx/2.8.5rel.1 libwww-FM/2.14 SSL-MM/1.4.1 GNUTLS/1.2.9’

]

class MyOpener(FancyURLopener, object):

version = choice(user_agents)

def MyFunc(url):

myopener = MyOpener()

s = myopener.open(url).read()

ss=s.replace(“\n”,” “)

urls=re.findall(r”a.*?href=.*?\/a”,ss,re.I)#尋找href鏈接

for i in urls:

do sth.

Python腳本在Windows下後台運行

Python腳本在Linux後台執行加個就行了

在Windows起Python服務總有不暢

查了一下,可以用start /b python xxx.py後台運行,

這招雖然不影響cmd操作,但是關閉cmd窗口後服務也死了

解決這個問題挺麻煩的,需要以Windows服務的方式掛起來

第一步,將Python腳本打包成exe可執行文件,詳見:

用python加cPAMIE加pyinstaller為我柱哥點贊

打包成exe文件以後,cmd執行

python:import cPAMIE 用到哪個模塊

PAMIE的全稱是Python Automated Module For Internet Explorer,顧名思義,PAMIE是一個實現IE自動化的模塊。

PAMIE的官方網站提供了最新模塊的下載,但由於是個人開發的緣故,其他文檔,常見問題解答之類的基本沒有更新,在下載最新版本之後,主頁上提供的資料有好多是錯的,大家在用的時候要務必注意這一點,最明顯的一個例子是我上篇文章裡面說的,還有一些方法名字已經更換。使用的時候,要多查查PAM30.py!

原創文章,作者:小藍,如若轉載,請註明出處:https://www.506064.com/zh-hant/n/301743.html

(0)
打賞 微信掃一掃 微信掃一掃 支付寶掃一掃 支付寶掃一掃
小藍的頭像小藍
上一篇 2024-12-30 16:09
下一篇 2024-12-30 16:09

相關推薦

  • Python周杰倫代碼用法介紹

    本文將從多個方面對Python周杰倫代碼進行詳細的闡述。 一、代碼介紹 from urllib.request import urlopen from bs4 import Bea…

    編程 2025-04-29
  • Python計算陽曆日期對應周幾

    本文介紹如何通過Python計算任意陽曆日期對應周幾。 一、獲取日期 獲取日期可以通過Python內置的模塊datetime實現,示例代碼如下: from datetime imp…

    編程 2025-04-29
  • Python列表中負數的個數

    Python列表是一個有序的集合,可以存儲多個不同類型的元素。而負數是指小於0的整數。在Python列表中,我們想要找到負數的個數,可以通過以下幾個方面進行實現。 一、使用循環遍歷…

    編程 2025-04-29
  • 如何查看Anaconda中Python路徑

    對Anaconda中Python路徑即conda環境的查看進行詳細的闡述。 一、使用命令行查看 1、在Windows系統中,可以使用命令提示符(cmd)或者Anaconda Pro…

    編程 2025-04-29
  • Python中引入上一級目錄中函數

    Python中經常需要調用其他文件夾中的模塊或函數,其中一個常見的操作是引入上一級目錄中的函數。在此,我們將從多個角度詳細解釋如何在Python中引入上一級目錄的函數。 一、加入環…

    編程 2025-04-29
  • Python字典去重複工具

    使用Python語言編寫字典去重複工具,可幫助用戶快速去重複。 一、字典去重複工具的需求 在使用Python編寫程序時,我們經常需要處理數據文件,其中包含了大量的重複數據。為了方便…

    編程 2025-04-29
  • Python清華鏡像下載

    Python清華鏡像是一個高質量的Python開發資源鏡像站,提供了Python及其相關的開發工具、框架和文檔的下載服務。本文將從以下幾個方面對Python清華鏡像下載進行詳細的闡…

    編程 2025-04-29
  • Python程序需要編譯才能執行

    Python 被廣泛應用於數據分析、人工智能、科學計算等領域,它的靈活性和簡單易學的性質使得越來越多的人喜歡使用 Python 進行編程。然而,在 Python 中程序執行的方式不…

    編程 2025-04-29
  • 蝴蝶優化算法Python版

    蝴蝶優化算法是一種基於仿生學的優化算法,模仿自然界中的蝴蝶進行搜索。它可以應用於多個領域的優化問題,包括數學優化、工程問題、機器學習等。本文將從多個方面對蝴蝶優化算法Python版…

    編程 2025-04-29
  • python強行終止程序快捷鍵

    本文將從多個方面對python強行終止程序快捷鍵進行詳細闡述,並提供相應代碼示例。 一、Ctrl+C快捷鍵 Ctrl+C快捷鍵是在終端中經常用來強行終止運行的程序。當你在終端中運行…

    編程 2025-04-29

發表回復

登錄後才能評論