python訓練營第一周（python訓練營怎麼樣）

本文目錄一覽：

• 1、python爬蟲的學習路徑
• 2、如何一個月入門Python爬蟲，輕鬆爬取大規模數據
• 3、python語言可以做什麼？
• 4、哪有好的python爬蟲學習資料
• 5、Python該怎麼入門?

python爬蟲的學習路徑

網絡爬蟲又稱網絡蜘蛛、網絡螞蟻、網絡機械人等，可以自動化瀏覽網絡中的信息，當然瀏覽信息的時候需要按照我們制定的規則進行，這些規則我們稱之為網絡爬蟲算法。使用Python可以很方便地編寫出爬蟲程序，進行互聯網信息的自動化檢索。

①要具備紮實的python語法基礎，這是一切的根基

②對前端知識有一定的了解，起碼做到能看懂

③如何獲取目標數據：requests模塊等

④如何解析目標數據：正則，xpath，jsonpath等

⑤如何做到做到反反爬：經驗總結

⑥如何大規模批量獲取數據：scrapy框架

如何一個月入門Python爬蟲，輕鬆爬取大規模數據

鏈接：

提取碼：2b6c

課程簡介

畢業不知如何就業？工作效率低經常挨罵？很多次想學編程都沒有學會？

Python 實戰：四周實現爬蟲系統，無需編程基礎，二十八天掌握一項謀生技能。

帶你學到如何從網上批量獲得幾十萬數據，如何處理海量大數據，數據可視化及網站製作。

課程目錄

開始之前，魔力手冊 for 實戰學員預習

第一周：學會爬取網頁信息

第二周：學會爬取大規模數據

第三周：數據統計與分析

第四周：搭建 Django 數據可視化網站

……

python語言可以做什麼？

1. Web開發

最火的Python web框架Django，支持異步高並發的Tornado框架，短小精悍的flask,bottle,Django官方的標語把Django定義為the framework for perfectionist with deadlines(大意是一個為完全主義者開發的高效率web框架)

2. 網絡編程

支持高並發的Twisted網絡框架，py3引入的asyncio使異步編程變的非常簡單

3. 爬蟲開發

爬蟲領域，Python幾乎是霸主地位，Scrapy/Request/BeautifuSoap/urllib等，想爬啥就爬啥

4. 雲計算開發

目前最火最知名的雲計算框架就是OpenStack,Python現在的火，很大一部分就是因為雲計算市場近幾年的爆發

5. 人工智能

MASA和Google早期大量使用Python，為什麼Python積累了豐富的科學運算庫，當AI時代來臨後，Python從眾多編程語言中脫穎而出，各種人工智能算法都基於Python編寫，由其PyTorch之後，Python作為AI時代頭牌語言的位置基本確立!

6. 自動化運維

問問中國的每個運維人員，運維人員必須會的語言是什麼?10個人詳細會給你一個相同的答案，它的名字叫Python

7. 金融分析

金融公司使用的很多分析程序、高頻交易軟件就是用的Python，目前，Python是金融分析、量化交易領域裏用的最多的語言

8. 科學運算

97年開始，NASA就在大量使用Python在進行各種複雜的科學運算，隨着NumPy，SciPy，Matplotlib，Enthought librarys等眾多程序庫的開發，使得Python越來越適合做科學計算、繪製高質量的2D和3D圖像。和科學計算領域最流行的商業軟件Matlab相比，Python是一門通用的程序設計語言，比Matlab所採用的腳本語言的應用範圍更廣泛

9. 遊戲開發

在網絡遊戲開發中Python也有很多應用。相比Lua or C++，Python比Lua有更高階的抽象能力，可以用更少的代碼描述遊戲業務邏輯，與Lua相比，Python更適合作為一種Host語言，即程序的入口點是在Python那一端會比較好，然後用C/C++在非常必要的時候寫一些擴展。Python非常適合編寫1萬行以上的項目，而且能夠很好的把網遊項目的規模控制在10萬行代碼以內。

10. 桌面軟件

雖然大家很少使用桌面軟件了，但是Python在圖形界面開發上也很強大，你可以用tkinter/PyQT框架開發各種桌面軟件!

哪有好的python爬蟲學習資料

鏈接：

提取碼：2b6c

課程簡介

畢業不知如何就業？工作效率低經常挨罵？很多次想學編程都沒有學會？

Python 實戰：四周實現爬蟲系統，無需編程基礎，二十八天掌握一項謀生技能。

帶你學到如何從網上批量獲得幾十萬數據，如何處理海量大數據，數據可視化及網站製作。

課程目錄

開始之前，魔力手冊 for 實戰學員預習

第一周：學會爬取網頁信息

第二周：學會爬取大規模數據

第三周：數據統計與分析

第四周：搭建 Django 數據可視化網站

……

Python該怎麼入門?

作為初學者，第一個月的月目標應該是這樣的：

熟悉基本概念（變量，條件，列表，循環，函數）

練習超過 30 個編程問題

利用這些概念完成兩個項目

熟悉至少 2 個框架

開始使用集成開發環境（IDE），Github，hosting，services 等

整體計劃

現在，我們先將月計劃細化成周計劃。

第一周：熟悉 Python

要積極探索 Python 的使用方法，儘可能多的完成下面這些任務：

第一天：基本概念（4 小時）：print，變量，輸入，條件語句

第二天：基本概念（5 小時）：列表，for 循環，while 循環，函數，導入模塊

第三天：簡單編程問題（5 小時）：交換兩個變量值，將攝氏度轉換為華氏溫度，求數字中各位數之和，判斷某數是否為素數，生成隨機數，刪除列表中的重複項等等

第四天：中級編程問題（6 小時）：反轉一個字符串（迴文檢測），計算最大公約數，合併兩個有序數組，猜數字遊戲，計算年齡等等

第五天：數據結構（6 小時）：棧，隊列，字典，元組，樹，鏈表。

第六天：面向對象編程（OOP）（6 小時）：對象，類，方法和構造函數，面向對象編程之繼承

第七天：算法（6 小時）：搜索（線性和二分查找）、排序（冒泡排序、選擇排序）、遞歸函數（階乘、斐波那契數列）、時間複雜度（線性、二次和常量）

通過第一周時間，python大致能熟悉了，自學能力稍微弱一點找人帶下你，節約自己的時間。

注意：別急着安裝 Python 環境！

這看起來很矛盾，但是你一定要相信我。我有幾個朋友，他們因為語言工具包和 IDE 安裝的失敗而逐漸失去了學習下去的慾望。因此，我的建議是先使用一些安卓 app 來探索這門語言，如果你是個技術小白，安裝 Python 環境可不是你的首要任務。

第二周：開始軟件開發（構建項目）

接下來，讓我們朝着軟件開發任務進軍吧！不妨嘗試綜合你學到的知識完成一個實際的項目：

第一天：熟悉一種 IDE（5 小時）: IDE 是你在編寫大型項目時的操作環境，所以你需要精通一個 IDE。在軟件開發的初期，我建議你在 VS code 中安裝 Python 擴展或使用 Jupyter notebook。

第二天：Github（6 小時）：探索 Github，並創建一個代碼倉庫。嘗試提交（Commit）、查看變更（Diff）和上推（Push）你的代碼。另外，還要學習如何利用分支工作，如何合併（merge）不同分支以及如何在一個項目中創建拉取請求（pull request）。

第三天：第一個項目——簡單計算器（4 小時）：熟悉 Tkinter，創建一個簡單的計算器

第四、五、六天：個人項目（每天 5 小時）：選定一個項目並完成它。如果你不知道你該做什麼，可以查看下面的清單（ pythonprojects -for-an- middle – programmer/answer/jhankar – mahbub2）

第七天：託管項目（5 小時）：學習使用服務器和 hosting 服務來託管你的項目。創建一個 Heroku 設置並部署你構建的應用程序。

為什麼要寫項目？

如果僅僅按部就班地學習課堂上或視頻中的內容，你無法擁有獨立思考能力。所以，你必須把你的知識應用到一個項目中。當你努力尋找答案時，你也在慢慢地學會這些知識。

第三周：讓自己成為一名程序員

第 3 周的目標是熟悉軟件開發的整體過程。你不需要掌握所有的知識，但是你應該知道一些常識，因為它們會影響你的日常工作。

第一天：數據庫基礎（6 小時）：基本 SQL 查詢（創建表、選擇、Where 查詢、更新）、SQL 函數（Avg、Max、Count）、關係數據庫（規範化）、內連接、外連接等

第二天：使用 Python 數據庫（5 小時）：利用一種數據庫框架（SQLite 或 panda），連接到一個數據庫，在多個表中創建並插入數據，再從表中讀取數據。

第三天：API（5 小時）：如何調用 API。學習 JSON、微服務（micro-service）以及表現層應用程序轉換應用程序接口（Rest API）。

第四天：Numpy（4 小時）：熟悉 Numpy（- Numpy -for- datascies-beginners-b8088722309f）並練習前 30 個 Numpy 習題（- 100/blob/master/100_numpy_excercises.md)

第五、六天：作品集網站（一天 5 小時）：學習 Django，使用 Django 構建一個作品集網站（- start-with-django -1/），也要了解一下 Flask 框架。

第七天：單元測試、日誌、調試（5 小時）：學習單元測試（PyTest），如何設置和查看日誌，以及使用斷點調試。

真心話時間（絕密）

如果你非常「瘋狂」，並且非常專註，你可以在一個月內完成這些任務。你必須做到：

把學習 Python 作為你的全職活動。你需要從早上 8 點開始學習，一直到下午 5 點。在此期間，你可以有一個午休時間和茶歇時間（共 1 小時）。

8 點列出你今天要學的東西，然後花一個小時複習和練習你昨天學過的東西。

從 9 點到 12 點：開始學習，並進行少量練習。在午飯後，你需要加大練習量，如果你卡在某個問題上，可以在網上搜索解決方案。

嚴格保持每天 4-5 小時的學習時間和 2-3 小時的練習時間（每周最多可以休息一天）。

你的朋友可能會認為你瘋了。走自己的路，讓別人去說吧！

如果你有一份全職工作，或者你是一名學生，完成這些流程可能需要更長的時間。作為一名全日制學生，我花了 8 個月的時間來完成這份清單。現在我是一名高級開發人員。所以，不管花多長時間，一定要完成它們。要想成功完成一個目標，必須付出百分之百的努力。

第四周：認真考慮工作（實習）問題

第 4 周的目標是認真思考如何才能被錄用。即使你現在不想找工作，你也可以在探索這條道路的過程中學到很多東西。

第一天：準備簡歷（5 小時）：製作一份一頁的簡歷。把你的技能總結放在最上面，必須在寫項目的同時附上 Github 鏈接。

第二天：作品集網站（6 小時）：寫幾個博客，將它們添加到你之前開發的作品集網站中。

第三天：LinkedIn 簡介（4 小時）：創建一個 LinkedIn 個人簡介，把簡歷上的所有內容都放到 LinkedIn 上。

第四天：面試準備（7 小時）：準備一些谷歌常見的面試問題，練習白皮書中的 10 個面試編程問題。在 Glassdoor、Careercup 等網站中查看前人遇到的面試問題。

第五天：社交（~小時）：走出房門，開始參加聚會、招聘會，與其他開發人員和招聘人員見面。

第六天：工作申請（~小時）：搜索「Python Job」，查看 LinkedIn Job 和本地求職網站。選擇 3 個工作崗位並發送工作申請。為每個工作定製你的簡歷。在每個工作要求中找出 2 到 3 件你不知道的事情，並在接下來的 3-4 天里學會它們。

第七天：在拒絕中學習（~小時）：每次你被拒絕的時候，找出兩件為了獲得這份工作你應該知道的事情，然後花 4-5 天 的時間來掌握它們。這樣，每次拒絕都會讓你成為更好的開發人員。