本文目錄一覽:
python培訓需要多久?
零基礎參加Python培訓班學習,Python全棧開發+人工智能課程培訓時間一般是5到6個月!
以下是老男孩教育Python課程內容:
階段一:Python開發基礎
Python開發基礎課程內容包括:計算機硬件、操作系統原理、安裝linux操作系統、linux操作系統維護常用命令、Python語言介紹、環境安裝、基本語法、基本數據類型、二進制運算、流程控制、字符編碼、文件處理、數據類型、用戶認證、三級菜單程序、購物車程序開發、函數、內置方法、遞歸、迭代器、裝飾器、內置方法、員工信息表開發、模塊的跨目錄導入、常用標準庫學習,b加密\re正則\logging日誌模塊等,軟件開發規範學習,計算器程序、ATM程序開發等。
階段二:Python高級級編編程數據庫開發
Python高級級編編程數據庫開發課程內容包括:面向對象介紹、特性、成員變量、方法、封裝、繼承、多態、類的生成原理、MetaClass、__new__的作用、抽象類、靜態方法、類方法、屬性方法、如何在程序中使用面向對象思想寫程序、選課程序開發、TCP/IP協議介紹、Socket網絡套接字模塊學習、簡單遠程命令執行客戶端開發、C\S架構FTP服務器開發、線程、進程、隊列、IO多路模型、數據庫類型、特性介紹,表字段類型、表結構構建語句、常用增刪改查語句、索引、存儲過程、視圖、觸發器、事務、分組、聚合、分頁、連接池、基於數據庫的學員管理系統開發等。
階段三:前端開發
前端開發課程內容包括:HTML\CSS\JS學習、DOM操作、JSONP、原生Ajax異步加載、購物商城開發、Jquery、動畫效果、事件、定時期、輪播圖、跑馬燈、HTML5\CSS3語法學習、bootstrap、抽屜新熱榜開發、流行前端框架介紹、Vue架構剖析、mvvm開發思想、Vue數據綁定與計算屬性、條件渲染類與樣式綁定、表單控件綁定、事件綁定webpack使用、vue-router使用、vuex單向數據流與應用結構、vuex actions與mutations熱重載、vue單頁面項目實戰開發等。
階段四:WEB框架開發
WEB框架開發課程內容包括:Web框架原理剖析、Web請求生命周期、自行開發簡單的Web框架、MTV\MVC框架介紹、Django框架使用、路由系統、模板引擎、FBV\CBV視圖、Models ORM、FORM、表單驗證、Django session cookie、CSRF驗證、XSS、中間件、分頁、自定義tags、Django Admin、cache系統、信號、message、自定義用戶認證、Memcached、redis緩存學習、RabbitMQ隊列學習、Celery分佈式任務隊列學習、Flask框架、Tornado框架、Restful API、BBS+Blog實戰項目開發等。
階段五:爬蟲開發
爬蟲開發課程內容包括:Requests模塊、BeautifulSoup,Selenium模塊、PhantomJS模塊學習、基於requests實現登陸:抽屜、github、知乎、博客園、爬取拉鉤職位信息、開發Web版微信、高性能IO性能相關模塊:asyncio、aiohttp、grequests、Twisted、自定義開發一個異步非阻塞模塊、驗證碼圖像識別、Scrapy框架以及源碼剖析、框架組件介紹(engine、spider、downloader、scheduler、pipeline)、分佈式爬蟲實戰等。
階段六:全棧項目實戰
全棧項目實戰課程內容包括:互聯網企業專業開發流程講解、git、github協作開發工具講解、任務管理系統講解、接口單元測試、敏捷開發與持續集成介紹、django + uwsgi + nginx生產環境部署學習、接口文檔編寫示例、互聯網企業大型項目架構圖深度講解、CRM客戶關係管理系統開發、路飛學城在線教育平台開發等。
階段七:數據分析
數據分析課程內容包括:金融、股票知識入門股票基本概念、常見投資工具介紹、市基本交易規則、A股構成等,K線、平均線、KDJ、MACD等各項技術指標分析,股市操作模擬盤演示量化策略的開發流程,金融量化與Python,numpy、pandas、matplotlib模塊常用功能學習在線量化投資平台:優礦、聚寬、米筐等介紹和使用、常見量化策略學習,如雙均線策略、因子選股策略、因子選股策略、小市值策略、海龜交易法則、均值回歸、策略、動量策略、反轉策略、羊駝交易法則、PEG策略等、開發一個簡單的量化策略平台,實現選股、擇時、倉位管理、止盈止損、回測結果展示等功能。
階段八:人工智能
人工智能課程內容包括:機器學習要素、常見流派、自然語言識別、分析原理詞向量模型word2vec、剖析分類、聚類、決策樹、隨機森林、回歸以及神經網絡、測試集以及評價標準Python機器學習常用庫scikit-learn、數據預處理、Tensorflow學習、基於Tensorflow的CNN與RNN模型、Caffe兩種常用數據源製作、OpenCV庫詳解、人臉識別技術、車牌自動提取和遮蔽、無人機開發、Keras深度學習、貝葉斯模型、無人駕駛模擬器使用和開發、特斯拉遠程控制API和自動化駕駛開發等。
階段九:自動化運維開發
自動化運維開發課程內容包括:設計符合企業實際需求的CMDB資產管理系統,如安全API接口開發與使用,開發支持windows和linux平台的客戶端,對其它系統開放靈活的api設計與開發IT資產的上線、下線、變更流程等業務流程。IT審計+主機管理系統開發,真實企業系統的用戶行為、管理權限、批量文件操作、用戶登錄報表等。分佈式主機監控系統開發,監控多個服務,多種設備,報警機制,基於http+restful架構開發,實現水平擴展,可輕鬆實現分佈式監控等功能。
階段十:高並發語言GO開發
高並發語言GO開發課程內容包括:Golang的發展介紹、開發環境搭建、golang和其他語言對比、字符串詳解、條件判斷、循環、使用數組和map數據類型、go程序編譯和Makefile、gofmt工具、godoc文檔生成工具詳解、斐波那契數列、數據和切片、makenew、字符串、go程序調試、slicemap、map排序、常用標準庫使用、文件增刪改查操作、函數和面向對象詳解、並發、並行與goroute、channel詳解goroute同步、channel、超時與定時器reover捕獲異常、Go高並發模型、Lazy生成器、並發數控制、高並發web服務器的開發等。
golang 實現選擇排序算法
選擇排序提高了冒泡排序的性能,它每遍歷一次列表只交換一次數據,即進行一次遍歷時找 到最大的項,完成遍歷後,再把它換到正確的位置。和冒泡排序一樣,第一次遍歷後,最大的數 據項就已歸位,第二次遍歷使次大項歸位。這個過程持續進行,一共需要 n-1 次遍歷來排好 n 個數 據,因為最後一個數據必須在第 n-1 次遍歷之後才能歸位。
go面試題整理(附帶部分自己的解答)
原文:【 】
如果有解答的不對的,麻煩各位在評論寫出來~
go的調度原理是基於GMP模型,G代表一個goroutine,不限制數量;M=machine,代表一個線程,最大1萬,所有G任務還是在M上執行;P=processor代表一個處理器,每一個允許的M都會綁定一個G,默認與邏輯CPU數量相等(通過runtime.GOMAXPROCS(runtime.NumCPU())設置)。
go調用過程:
可以能,也可以不能。
因為go存在不能使用==判斷類型:map、slice,如果struct包含這些類型的字段,則不能比較。
這兩種類型也不能作為map的key。
類似棧操作,後進先出。
因為go的return是一個非原子性操作,比如語句 return i ,實際上分兩步進行,即將i值存入棧中作為返回值,然後執行跳轉,而defer的執行時機正是跳轉前,所以說defer執行時還是有機會操作返回值的。
select的case的表達式必須是一個channel類型,所有case都會被求值,求值順序自上而下,從左至右。如果多個case可以完成,則會隨機執行一個case,如果有default分支,則執行default分支語句。如果連default都沒有,則select語句會一直阻塞,直到至少有一個IO操作可以進行。
break關鍵字可跳出select的執行。
goroutine管理、信息傳遞。context的意思是上下文,在線程、協程中都有這個概念,它指的是程序單元的一個運行狀態、現場、快照,包含。context在多個goroutine中是並發安全的。
應用場景:
例子參考:
waitgroup
channel
len:切片的長度,訪問時間複雜度為O(1),go的slice底層是對數組的引用。
cap:切片的容量,擴容是以這個值為標準。默認擴容是2倍,當達到1024的長度後,按1.25倍。
擴容:每次擴容slice底層都將先分配新的容量的內存空間,再將老的數組拷貝到新的內存空間,因為這個操作不是並發安全的。所以並發進行append操作,讀到內存中的老數組可能為同一個,最終導致append的數據丟失。
共享:slice的底層是對數組的引用,因此如果兩個切片引用了同一個數組片段,就會形成共享底層數組。當sliec發生內存的重新分配(如擴容)時,會對共享進行隔斷。詳細見下面例子:
make([]Type,len,cap)
map的底層是hash table(hmap類型),對key值進行了hash,並將結果的低八位用於確定key/value存在於哪個bucket(bmap類型)。再將高八位與bucket的tophash進行依次比較,確定是否存在。出現hash衝撞時,會通過bucket的overflow指向另一個bucket,形成一個單向鏈表。每個bucket存儲8個鍵值對。
如果要實現map的順序讀取,需要使用一個slice來存儲map的key並按照順序進行排序。
利用map,如果要求並發安全,就用sync.map
要注意下set中的delete函數需要使用 delete(map) 來實現,但是這個並不會釋放內存,除非value也是一個子map。當進行多次delete後,可以使用make來重建map。
使用sync.Map來管理topic,用channel來做隊列。
參考:
多路歸併法:
pre class=”vditor-reset” placeholder=”” contenteditable=”true” spellcheck=”false”p data-block=”0″(1)假設有K路a href=””數據流/a,流內部是有序的,且流間同為升序或降序;
/pp data-block=”0″(2)首先讀取每個流的第一個數,如果已經EOF,pass;
/pp data-block=”0″(3)將有效的k(k可能小於K)個數比較,選出最小的那路mink,輸出,讀取mink的下一個;
/pp data-block=”0″(4)直到所有K路都EOF。
/p/pre
假設文件又1個G,內存只有256M,無法將1個G的文件全部讀到內存進行排序。
第一步:
可以分為10段讀取,每段讀取100M的數據並排序好寫入硬盤。
假設寫入後的文件為A,B,C…10
第二步:
將A,B,C…10的第一個字符拿出來,對這10個字符進行排序,並將結果寫入硬盤,同時記錄被寫入的字符的文件指針P。
第三步:
將剛剛排序好的9個字符再加上從指針P讀取到的P+1位數據進行排序,並寫入硬盤。
重複二、三步驟。
go文件讀寫參考:
保證排序前兩個相等的數其在序列的前後位置順序和排序後它們兩個的前後位置順序相同的排序叫穩定排序。
快速排序、希爾排序、堆排序、直接選擇排序不是穩定的排序算法。
基數排序、冒泡排序、直接插入排序、折半插入排序、歸併排序是穩定的排序算法。
參考:
head只請求頁面的首部。多用來判斷網頁是否被修改和超鏈接的有效性。
get請求頁面信息,並返回實例的主體。
參考:
401:未授權的訪問。
403: 拒絕訪問。
普通的http連接是客戶端連接上服務端,然後結束請求後,由客戶端或者服務端進行http連接的關閉。下次再發送請求的時候,客戶端再發起一個連接,傳送數據,關閉連接。這麼個流程反覆。但是一旦客戶端發送connection:keep-alive頭給服務端,且服務端也接受這個keep-alive的話,兩邊對上暗號,這個連接就可以復用了,一個http處理完之後,另外一個http數據直接從這個連接走了。減少新建和斷開TCP連接的消耗。這個可以在Nginx設置,
這個keepalive_timout時間值意味着:一個http產生的tcp連接在傳送完最後一個響應後,還需要hold住keepalive_timeout秒後,才開始關閉這個連接。
特別注意TCP層的keep alive和http不是一個意思。TCP的是指:tcp連接建立後,如果客戶端很長一段時間不發送消息,當連接很久沒有收到報文,tcp會主動發送一個為空的報文(偵測包)給對方,如果對方收到了並且回復了,證明對方還在。如果對方沒有報文返回,重試多次之後則確認連接丟失,斷開連接。
tcp的keep alive可通過
net.ipv4.tcp_keepalive_intvl = 75 // 當探測沒有確認時,重新發送探測的頻度。缺省是75秒。
net.ipv4.tcp_keepalive_probes = 9 //在認定連接失效之前,發送多少個TCP的keepalive探測包。缺省值是9。這個值乘以tcp_keepalive_intvl之後決定了,一個連接發送了keepalive之後可以有多少時間沒有回應
net.ipv4.tcp_keepalive_time = 7200 //當keepalive起用的時候,TCP發送keepalive消息的頻度。缺省是2小時。一般設置為30分鐘1800
修改:
可以
tcp是面向連接的,upd是無連接狀態的。
udp相比tcp沒有建立連接的過程,所以更快,同時也更安全,不容易被攻擊。upd沒有阻塞控制,因此出現網絡阻塞不會使源主機的發送效率降低。upd支持一對多,多對多等,tcp是點對點傳輸。tcp首部開銷20位元組,udp8位元組。
udp使用場景:視頻通話、im聊天等。
time-wait表示客戶端等待服務端返回關閉信息的狀態,closed_wait表示服務端得知客戶端想要關閉連接,進入半關閉狀態並返回一段TCP報文。
time-wait作用:
解決辦法:
close_wait:
被動關閉,通常是由於客戶端忘記關閉tcp連接導致。
根據業務來啊~
重要指標是cardinality(不重複數量),這個數量/總行數如果過小(趨近於0)代表索引基本沒意義,比如sex性別這種。
另外查詢不要使用select *,根據select的條件+where條件做組合索引,盡量實現覆蓋索引,避免回表。
殭屍進程:
即子進程先於父進程退出後,子進程的PCB需要其父進程釋放,但是父進程並沒有釋放子進程的PCB,這樣的子進程就稱為殭屍進程,殭屍進程實際上是一個已經死掉的進程。
孤兒進程:
一個父進程退出,而它的一個或多個子進程還在運行,那麼那些子進程將成為孤兒進程。孤兒進程將被init進程(進程號為1)所收養,並由init進程對它們完成狀態收集工作。
子進程死亡需要父進程來處理,那麼意味着正常的進程應該是子進程先於父進程死亡。當父進程先於子進程死亡時,子進程死亡時沒父進程處理,這個死亡的子進程就是孤兒進程。
但孤兒進程與殭屍進程不同的是,由於父進程已經死亡,系統會幫助父進程回收處理孤兒進程。所以孤兒進程實際上是不佔用資源的,因為它終究是被系統回收了。不會像殭屍進程那樣佔用ID,損害運行系統。
原文鏈接:
產生死鎖的四個必要條件:
(1) 互斥條件:一個資源每次只能被一個進程使用。
(2) 請求與保持條件:一個進程因請求資源而阻塞時,對已獲得的資源保持不放。
(3) 不剝奪條件:進程已獲得的資源,在末使用完之前,不能強行剝奪。
(4) 循環等待條件:若干進程之間形成一種頭尾相接的循環等待資源關係。
避免方法:
端口佔用:lsof -i:端口號 或者 nestat
cpu、內存佔用:top
發送信號:kill -l 列出所有信號,然後用 kill [信號變化] [進程號]來執行。如kill -9 453。強制殺死453進程
git log:查看提交記錄
git diff :查看變更記錄
git merge:目標分支改變,而源分支保持原樣。優點:保留提交歷史,保留分支結構。但會有大量的merge記錄
git rebase:將修改拼接到最新,複雜的記錄變得優雅,單個操作變得(revert)很簡單;缺點:
git revert:反做指定版本,會新生成一個版本
git reset:重置到某個版本,中間版本全部丟失
etcd、Consul
pprof
節省空間(非葉子節點不存儲數據,相對b tree的優勢),減少I/O次數(節省的空間全部存指針地址,讓樹變的矮胖),範圍查找方便(相對hash的優勢)。
explain
其他的見:
runtime2.go 中關於 p 的定義: 其中 runnext 指針決定了下一個要運行的 g,根據英文的注釋大致意思是說:
所以當設置 runtime.GOMAXPROCS(1) 時,此時只有一個 P,創建的 g 依次加入 P, 當最後一個即 i==9 時,加入的最後 一個 g 將會繼承當前主 goroutinue 的剩餘時間片繼續執行,所以會先輸出 9, 之後再依次執行 P 隊列中其它的 g。
方法一:
方法二:
[圖片上傳失敗…(image-4ef445-1594976286098)]
方法1:to_days,返回給的日期從0開始算的天數。
方法2:data_add。向日期添加指定時間間隔
[圖片上傳失敗…(image-b67b10-1594976286098)]
golang 冒泡排序
冒泡排序要對一個列表多次重複遍歷。它要比較相鄰的兩項,並且交換順序排錯的項。每對 列表實行一次遍歷,就有一個最大項排在了正確的位置。大體上講,列表的每一個數據項都會在 其相應的位置 「冒泡」。如果列表有 n 項,第一次遍歷就要比較 n-1 對數據。需要注意,一旦列 表中最大(按照規定的原則定義大小)的數據是所比較的數據對中的一個,它就會沿着列表一直 後移,直到這次遍歷結束
【golang】冒泡排序和選擇排序
運行結果:
flag的作用:排序不一定會走完所有循環,有可能在中間就完成了排序。只要發現在某一輪的循環中,沒有發生任何交換,就說明每一組都是前面的數比下一個數小,如此就不用再往下進行,終止循環。
運行結果:
原創文章,作者:小藍,如若轉載,請註明出處:https://www.506064.com/zh-hk/n/231423.html