python實習報告（共7篇）python實習報告（共7篇）篇：Python網絡爬蟲實習報告實用標準文案Python網絡爬蟲實習報告精彩文檔實用標準文案目錄一、選題背景二、爬蟲原理爬蟲歷史和分類四、常用爬蟲框架比較五、數據爬取實戰（豆瓣網爬取電影數據）1分析網頁.2爬取數據.3數據整理、轉換4數據保存、展示5技術難點關鍵點.六、精彩文檔實用標準文案一、選題背景二、爬蟲原理三、爬蟲歷史和分類四、常用爬蟲框架比較Scrapy框架:Scrapy框架是一套比較成熟的Python爬蟲框架，是使用Python開發的快速、高層次的信息爬取框架，可以高效的爬取web頁面并提取出結構化數據。Scrapy應用范圍很廣，爬蟲開發、數據挖掘、數據監測、自動化測試等。Crawley框架:Crawley也是Python開發出的爬蟲框架，該框架致力于改變人們從互聯網中提取數據的方式。Portia框架:Portia框架是一款允許沒有任何編程基礎的用戶可視化地爬取網頁的爬蟲框架。newspaper框架:newspaper框架是一個用來提取新聞、文章以及內容分析的Python爬蟲框架。Python-goose框架：Python-goose框架可提取的信息包括：文章主體內容;文章主要圖片;文章中嵌入的任heYoutube/Vimeo視頻;元描述;元標簽精彩文檔實用標準文案五、數據爬取實戰（豆瓣網爬取電影數據）1分析網頁data['rating_people_num'][i])f.write("%s"%data['movie_author'][i])f.write("")f.write("")f.write("")f.write("")f.write("第2篇：Python網絡爬蟲實習報告.Python網絡爬蟲實習報告..目錄一、選題背景二、爬蟲原理三、爬蟲歷史和分類四、常用爬蟲框架比較五、數據爬取實戰（豆瓣網爬取電影數據）.1分析網頁2爬取數據3數據整理、轉換4數據保存、展示5技術難點關鍵點六、總結一、選題背景二、爬蟲原理三、爬蟲歷史和分類四、常用爬蟲框架比較Scrapy框架:Scrapy框架是一套比較成熟的Python爬蟲框架，是使用Python開發的快速、高層次的信息爬取框架，可以高效的爬取web頁面并提取出結構化數據。Scrapy應用圍很廣，爬蟲開發、數據挖掘、數據監測、自動化測試等。Crawley框架:Crawley也是Python開發出的爬蟲框架，該框架致力于改變人們從互聯網中提取數據的方式。Portia框架:Portia框架是一款允許沒有任何編程基礎的用戶可視化地爬取網頁的爬蟲框架。newspaper框架:newspaper框架是一個用來提取新聞、文章以及容分析的Python爬蟲框架。Python-goose框架：Python-goose框架可提取的信息包括：文章主體容;文章主要圖片;文章中嵌入的任heYoutube/Vimeo視頻;元描述;元標簽..五、數據爬取實戰（豆瓣網爬取電影數據）1分析網頁#獲取html源代碼def__getHtml():data=pageNum=1pageSize=0try:while(pageSize#headers={'User-Agent':'Mozilla/5.0(WindowsNT6.1)AppleWebKit/537.11(KHTML,likeGecko)Chrome/23.0.1271.64Safari/537.11',#'Referer':None#注意如果依然不能抓取的話，這里可以設置抓取的host#}#opener=urllib.request.build_opener()#opener.addheaders=[headers]url="https://movie.douban./top250?start="+str(pageSize)+"&filter="+str(pageNum)#data['html%s'%i]=urllib.request.urlopen(url).read().decode("utf-8")..data.append(urllib.request.urlopen(url).read().decode("utf-8"))pageSize+=25pageNum+=1print(pageSize,pageNum)exceptExceptionase:raiseereturndata2爬取數據def__getData(html):title=#電影標題#rating_num=#評分range_num=#排名#rating_people_num=#評價人數movie_author=#導演data={}#bs4解析htmlsoup=BeautifulSoup(html,"html.parser")forliinsoup.find("ol",attrs={'cla':'grid_view'}).find_all("li"):title.append(li.find("span",cla_="title").text)#rating_num.append(li.find("div",..cla_='star').find("span",cla_='rating_num').text)range_num.append(li.find("div",cla_='pic').find("em").text)#spans=li.find("div",cla_='star').find_all("span")#forxinrange(len(spans)):#ifxindex=str.find("主")if(index==-1):index=str.find("...")print(li.find("div",cla_='pic').find("em").text)if(li.find("div",cla_='pic').find("em").text==210):index=60#print("aaa")#print(str[4:index])movie_author.append(str[4:index])..data['title']=title#data['rating_num']=rating_numdata['range_num']=range_num#data['rating_people_num']=rating_people_numdata['movie_author']=movie_authorreturndata3數據整理、轉換def__getMovies(data):f=open('F://douban_movie.html','w',encoding='utf-8')Crawley框架:Crawley也是Python開發出的爬蟲框架，該框架致力于改變人們從互聯網中提取數據的方式。Portia框架:Portia框架是一款允許沒有任何編程基礎的用戶可視化地爬取網頁的爬蟲框架。newspaper框架:newspaper框架是一個用來提取新聞、文章以及內容分析的Python爬蟲框架。3.Python和Java、PHP、C、C#、C++等其他語言的對比？4.簡述解釋型和編譯型編程語言？5.Python解釋器種類以及特點？6.位和字節的關系？7.b、B、KB、MB、GB的關系？11.python遞歸的最大層數？12.求結果：v1=1or3v2=1and3v3=0and2and1v4=0and2or1v5=0and2or1or4v6=0orFlaseand113.ascii、unicode、utf-8、gbk區別？14.字節碼和機器碼的區別？15.三元運算規則以及應用場景？16.列舉Python2和Python3的區別？17.用一行代碼實現數值交換：a=1b=218.Python3和Python2中int和long的區別？19.xrange和range的區別？20.文件操作時：xreadlines和readlines的區別？21.列舉布爾值為False的常見值？29.Python的可變類型和不可變類型？30.求結果：v=dict.fromkeys(['k1'，'k2']，)v[‘k1’].append(666)print(v)v[‘k1’]=777print(v)31.求結果：defnum():return[lambdax:i*xforIinrange(4)]print([m(2)forminnum()])32.列舉常見的內置函數？33.filter、map、reduce的作用？34.一行代碼實現9*9乘法表35.如何安裝第三方模塊？以及用過哪些第三方模塊？39.求結果：a.[i%2foriinrange(10)]b.(i%2foriinrange(10))40.求結果：a.1or2b.1and2c.142.如何實現“1，2，3”變成[‘1’，’2’，’3’]?43.如何實現[‘1’，’2’，’3’]變成[1，2，3]?44.比較：a=[1，2，3]和b=[(1)，(2)，(3)]以及b=[(1，)，(2，)，(3，)]的區別？45.如何用一行代碼生成[1，4，9，16，25，36，49，64，81，100]?46.一行代碼實現刪除列表中重復的值?47.如何在函數中設置一個全局變量？48.logging模塊的作用？以及應用場景？49.請用代碼簡答實現stack。50.常用字符串格式化哪幾種？51.簡述生成器、迭代器、可迭代對象以及應用場景？52.用Python實現一個二分查找的函數。53.談談你對閉包的理解？54.os和sys模塊的作用？56.如何使用python刪除一個文件？57.談談你對面向對象的理解？58.Python面向對象中的繼承有什么特點？59.面向對象深度優先和廣度優先是什么？60.面向對象中super的作用？61.是否使用過functools中的函數？其作用是什么？62.列舉面向對象中帶爽下劃線的特殊方法，如：__new__、__init__63.如何判斷是函數還是方法？64.靜態方法和類方法區別？65.列舉面向對象中的特殊成員以及應用場景66.1、2、3、4、5能組成多少個互不相同且無重復的三位數67.什么是反射？以及應用場景？68.metacla作用？以及應用場景？69.用盡量多的方法實現單例模式。70.裝飾器的寫法以及應用場景。71.異常處理寫法以及如何主動跑出異常（應用場景）72.什么是面向對象的mro73.isinstance作用以及應用場景？74.寫代碼并實現：76.json序列化時，默認遇到中文會轉換成unicode，如果想要保留中文怎么辦？77.什么是斷言？應用場景？78.有用過withstatement嗎？它的好處是什么？79.使用代碼實現查看列舉目錄下的所有文件。80.簡述yield和yieldfrom關鍵字。2.單引號中的字符串可以包含雙引號，雙引號中的字符串可以包含單引號，而不需要使用轉義字符。另外3個引號所包圍的字符可以作為注釋，還可以作為格式化的字符串，該字符串可以不再一行，格式化后行尾會自動轉化為“n”轉義字符。3.在Python中可以使用“”將較長的語句分成幾行來寫，但是注意每行后面不可以有#注釋。或者可以使用圓括號將較長的語句分行，每行后面可以使用#注釋。4.類型間轉換hex()：將整數轉換為十六進制字符串，包含前綴“0x”oct()：將整數轉換為八進制字符串，包含前綴“0o”注：string模塊中有string.atoi(x,base=10)，類似int()，但是可以選擇變換后的進制5.math模塊中數學函數：hypot(x,y)：求直角三角形的斜邊長度，x和y為兩個直角邊長度fmod(x,y)：求x/y的余數，等同于x%yceil(x)：求不小于x的最大整數floor(x)：求不大于x的最小整數fabs(x)：求x的絕對值exp(x)：求e的x次冪pow(x,y)：求x的y次冪，等同于x**ylog10(x)：求x以log10為底的對數sqrt(x)：求x的平方根pi：求pi的值6.字符串操作string.capitalize()：將字符串第一個字母大寫string.count(x)：獲得字符串中某字符串的數目string.find(x)：獲得字符串中某子字符串的起始位置string.isalnum()：是否僅包含0～9、A～Z、a～zstring.isalpha()：是否僅包含A～Z、a～zstring.isaldigit()：是否僅包含0～9string.islower()string.isupper()string.lower()string.upper()string.ipace()string.istitle()：字符串中所有單詞是否首字母大寫string.title()string.join(x)：將string插入x中的每兩個字符之間string.swapcase()：大小寫字母轉換string.split(x)：利用分割字符串的單詞（默認是space）len(string)7.格式化字符串%f%d%s%o：八進制整數%x：十六進制整數注：r"xxxxx"或者R"xxxxx"表示原始字符串，常用語正則表達式或者路徑表示中，其間沒有轉義字符，均是正常字符。8.列表listlist.append(x)：追加成員xlist.count(x)：參數x出現的次數list.extend(x)：list1+list2無法改變list1，只能返回一個新的list，但是list2.extend(list2)函數可以改變list1的值list.index(x)：獲得x在list中的位置list.insert(index,x)：在index處插入xlist.pop(index)：刪除索引為index的成員list.remove(x)：刪除值為x的成員list.reverse()list.sort()list.clear()注：tuple的操作與list類似，但是不包含可修改元組的操作。9.字典dictdict.clear()dict.copy(x)：將字典x拷貝給dictdict.get(key)：等同于dict[k]dict.has_key(key)：是否包含key鍵dict.items()：獲得鍵-值對組成的列表dict.keys()：獲得鍵組成的列表dict.values()：獲得值組成的列表dict.pop(key)dict.update(x)：利用字典x更新原字典10.文件操作open(filename,mode,bufsize)filename：要打開的文件名mode：打開模式（r是只讀，w是替換寫，a是追加寫，+是讀寫等）bufsize：緩沖區大小，可以默認file.read()：整個文件讀入字符串中file.readlines()：整個文件讀入列表中file.readline()：某行讀入字符串中file.write(x)：寫入字符串file.writelines(x)：寫入列表xfile.close().11.函數參數調用函數可以同時使用按順序傳遞參數，以及關鍵字傳遞參數等，但是必須注意按順序傳遞的參數要位于按關鍵字傳遞的參數之前，而且不能有重復的情況發生。例如：defsample(x,y,z):pamysum(1,z=5,y=6)#okmysum(z=6,y=7,3)#error使用可變長參數的函數，將其所有參數保存在一個元組里，在函數中可以使用for循環來處理，聲明一個可變長參數的函數只需用*開頭定義一個參數即可。12.局部/全局變量局部作用域內的變量的改變并不影響全局作用域內的變量，除非通過引用的方式傳遞參數。如果要在函數內使用函數外的變量，可以在變量名前使用global關鍵字。例如：deffunc(x):globalareturnx+a13.模塊查找路徑導入模塊時，python解釋器首先在當前目錄中查找導入的模塊；如果未找到，解釋器會從sys模塊中的path變量指定的目錄查找導入模塊；如果均未找到，則會出錯。importsyssys.path在腳本中可以向sys.path添加查找路徑，例如可以在.py中如下：importosimportsysmodulepath=os.getcwd()+?module?#module是當前目錄下的module子目錄sys.path.append(modulepath)importmymodule#mymodule在module子目錄中************14.dir(x)可以獲得導入模塊中的所有定義的名字和函數等。importsysdir(sys)當不使用參數時，該函數將返回當前腳本的所有名字列表。15.模塊包包可以看成是出于同一個目錄中的模塊，在python中首先使用目錄名，然后再使用模塊名導入所需要的模塊。在包的每個目錄（包括子目錄）中都必須包含一個“__init__.py”的文件，該文件甚至可以是一個空文件，僅用于表示該目錄為一個包。在__init__.py中設置__all__變量和包初始化所需的代碼，可以保證在from中使用*時名字的正確導入。fromA.BimportaimportA.B.a有了包的概念可以很好地解決模塊查找路徑的問題，只要將所有的模塊放在當前目錄中的某個文件夾內（子目錄），然后在子目錄內新建一個__init__.py文件即可，而不需將子目錄的路徑添加到sys.path中。第6篇：Python學習總結Python總結目錄Python總結1前言2（一）如何學習Python2（二）一些Python免費課程推薦4（一）如何學習Python學習Python大致可以分為以下幾個階段：1.剛上手的時候肯定是先過一遍Python最基本的知識，比如說：變量、數據結構、語法等，基礎過的很快，基本上1~2周時間就能過完了，我當時是在這兒看的基礎：Python簡介|菜鳥教程2.看完基礎后，就是做一些小項目鞏固基礎，比方說：做一個終端計算器，如果實在找不到什么練手項目，可以在Codecademy知乎專欄5.Python庫是開發者利器，用這些庫你可以做很多很多東西，最常見的網絡爬蟲、自然語言處理、圖像識別等等，這些領域都有很強大的Python庫做支持，所以當你學了Python庫之后，一定要第一時間進行練習。如何尋找自己需要的Python庫呢？推薦我之前的一個回答：如何找到適合需求的Python庫?6.學習使用了這些Python庫，此時的你應該是對Python十分滿意，也十分激動能遇到這樣的語言，就是這個時候不妨開始學習Python數據結構與算法，Python設計模式，這是你進一步學習的一個重要步驟：faif/python-patterns7.當度過艱難的第六步，此時選擇你要研究的方向，如果你想做后端開發，不妨研究研究Django，再往后，就是你自己自由發揮了。（二）一些Python免費課程推薦以下課程都為免費課程1.python零基礎相關適用人群：Python零基礎的初學者、Web開發程序員、運維人員、有志于從事互聯網行業以及各領域應用Python的人群?瘋狂的Python：快速入門精講?零基礎入門學習Python?玩轉Python語言?Python語言程序設計?程序設計入門?可汗學院公開課：計算機科學?python入門到精通?Python交互式編程入門的課程主頁?Python交互編程入門（第2部分）的課程主頁2.pythonweb方向PythonDjango快速Web應用開發入門3.python爬蟲Python實戰：一周學會爬取網頁4.python數據分析方向數據分析實戰基礎課程（三）Python爬蟲需要哪些知識？要學會使用Python爬取網頁信息無外乎以下幾點內容：1、要會Python2、知道網頁信息如何呈現3、了解網頁信息如何產生4、學會如何提取網頁信息第一步Python是工具，所以你必須熟練掌握它，要掌握到什么程度呢？如果你只想寫一寫簡單的爬蟲，不要炫技不考慮爬蟲效率，你只需要掌握：?????數據類型和變量字符串和編碼使用list和tuple條件判斷、循環使用dict和set你甚至不需要掌握函數、異步、多線程、多進程，當然如果想要提高自己小爬蟲的爬蟲效率，提高數據的精確性，那么記住最好的方式是去系統的學習一遍Python，去哪兒學習？Python教程假設已經熟悉了最基礎的Python知識，那么進入第二步：知道網頁信息如何呈現？你首先要知道所需要抓取的數據是怎樣的呈現的，就像是你要學做一幅畫，在開始之前你要知道這幅畫是用什么畫出來的，鉛筆還是水彩筆...可能種類是多樣的，但是放到網頁信息來說這兒只有兩種呈現方式：1、HTML（HTML簡介）2、JSON（JSON簡介）HTML是用來描述網頁的一種語言JSON是一種輕量級的數據交換格式假設你現在知道了數據是由HTML和JSON呈現出來的，那么我們緊接著第三步：數據怎么來？數據當然是從服務器反饋給你的，為什么要反饋給你？因為你發出了請求。“Hi~，服務器我要這個資源”“正在傳輸中...”“已經收到HTML或者JSON格式的數據”這個請求是什么請求？要搞清楚這一點你需要了解一下http的基礎知識，更加精確來說你需要去了解GET和POST是什么，區別是什么。也許你可以看看這個：淺談HTTP中Get與Post的區別博客園很高興你使用的是Python，那么你只需要去掌握好快速上手知乎專欄知乎--Python學習路徑及練手項目合集（四）Python爬蟲進階爬蟲無非分為這幾塊：分析目標、下載頁面、解析頁面、存儲內容，其中下載頁面不提。1.分析目標所謂分析就是首先你要知道你需要抓取的數據來自哪里？怎么來？普通的網站一個簡單的POST或者GET請求，不加密不反爬，幾行代碼就能模擬出來，這是最基本的，進階就是學會分析一些復雜的目標，比如說：淘寶、新浪微博登陸以及網易云的評論信息等等。2.解析頁面解析頁面主要是選擇什么庫或者那些庫結合能使解析速度更快，可能你一開始你通過種種地方了解到了bs庫，于是你對這個庫很癡迷，以后只要寫爬蟲，總是先寫上：importrequestsfrombs4importBeautifulSoup當然bs已經很優秀了，但是并不代表可以用正則表達式解析的頁面還需要使用bs，也不代表使用lxml能解決的還要動用bs，所以這些解析庫的速度是你在進階時要考慮的問題。3.存儲內容剛開始學爬蟲，一般爬取的結果只是打印出來，最后把在終端輸出的結果復制粘貼保存就好了；后來發現麻煩會用上xlwt/openpyxl/csv的把存儲內容寫入表格，再后來使用數據庫sqlite/mysql/neo4j只要調用了庫都很簡單，當然這是入門。進階要開始學習如何選擇合適的數據庫，或者存儲方式。當爬取的內容過千萬的時候，如何設計使存儲速度更快，比如說當既有人物關系又有人物關系的時候，一定會用neo4j來存儲關系，myslq用來存儲用戶信息，這樣分開是因為如果信息全部存入neo4j，后期的存儲速度經十分的慢。當你每個步驟都能做到很優秀的時候，你應該考慮如何組合這四個步驟，使你的爬蟲達到效率最高，也就是所謂的爬蟲策略問題，爬蟲策略學習不是一朝一夕的事情，建議多看看一些比較優秀的爬蟲的設計方案，比如說Scrapy。除了爬取策略以外，還有幾點也是必備的：1.代理策略以及多用戶策略代理是爬蟲進階階段必備的技能，與入門階段直接套用代理不同，在進階階段你需要考慮如何設計使用代理策略，什么時候換代理，代理的作用范圍等等，多用戶的抓取策略考慮的問題基本上與代理策略相同。2.增量式抓取以及數據刷新比如說你抓取的是一個酒店網站關于酒店價格數據信息的，那么會有這些問題：酒店的房型的價格是每天變動的，酒店網站每天會新增一批酒店，那么如何進行存儲、如何進行數據刷新都是應該考慮的問題。3.驗證碼相關的一些問題有很多人提到驗證碼，我個人認為驗證碼不是爬蟲主要去解決的問題，驗證碼不多的情況考慮下載到本地自己輸入驗證碼，在多的情況下考慮接入打碼平臺。（五）Python爬蟲面試指南前段時間快要畢業，而我又不想找自己的老本行Java開發了，所以面了很多Python爬蟲崗位。因為我在南京上學，所以我一開始只是在南京投了簡歷，我一共面試了十幾家企業，其中只有一家沒有給我發offer，其他企業都愿意給到10K的薪資，不要拿南京的薪資水平和北上深的薪資水平比較，結合面試常問的問題類型說一說我的。第一點：Python因為面試的是Python爬蟲崗位，面試官大多數會考察面試者的基礎的Python知識，包括但不限于：????Python2.x與Python3.x的區別Python的裝飾器Python的異步Python的一些常用內置庫，比如多線程之類的第二點：數據結構與算法數據結構與算法是對面試者尤其是校招生面試的一個很重要的點，當然小公司不會太在意這些，從目前的招聘情況來看對面試者的數據結構與算法的重視程度與企業的好壞成正比，那些從不問你數據結構的你就要當心他們是否把你當碼農用的，當然以上情況不絕對，最終解釋權歸面試官所有。第三點：Python爬蟲最重要也是最關鍵的一點當然是你的Python爬蟲相關的知識與經驗儲備，這通常也是面試官考察的重點，包括但不限于：?????你遇到過的反爬蟲的策略有哪些？你常用的反反爬蟲的方案有哪些？你用過多線程和異步嗎？除此之外你還用過什么方法來提高爬蟲效率？有沒有做過增量式抓取？對Python爬蟲框架是否有了解？第四點：爬蟲相關的項目經驗爬蟲重在實踐，除了理論知識之外，面試官也會十分注重爬蟲相關的項目：?你做過哪些爬蟲項目？如果有Github最好?你認為你做的最好的爬蟲項目是哪個？其中解決了什么難題？有什么特別之處？以上是我在面試過程中，會碰到的一些技術相關的問題的總結，當然面試中不光是技術這一點，但是對于做技術的，過了技術面基本上就是薪資問題了。（六）推薦一些不錯的Python博客如果是Python基礎的話，廖雪峰的博客教程會是一個不錯的選擇：??Python3教程Python2.7教程當然很多剛接觸Python的同學反應廖大大的教程中部分跳躍性太大，如果覺得跳躍性太大可以結合菜鳥教程一起看：??Python3教程|菜鳥教程Python基礎教程|菜鳥教程如果你英文稍好的話推薦還是看官方文檔：Python3.6.0documentation如果不是為了學習Python基礎的話，推薦幾個其他的博客。????董老師的博客：小明明sàdomicile《Python-Web開發實戰》的作者，知乎某位工程師的博客：分類《Python》，具體是哪位大神我不太清楚。依云大大的博客文章值得深讀：依云'sBlog《從Python開始學編程》的作者博客：PythonVamei博客園Python|the5fire的技術博客（七）Python如何進階很多人在學習編程之初都會碰到這種問題：學會了基礎的語法了，但是還是做不了項目，不知道如何下手。當初，我學習C的時候是這樣、Java的時候是這樣、Python的時候也是這樣，其實不管什么語言、什么知識都是這樣：理論基礎知識謝科的回答如果你想學習編程，但是找不到學習路徑和資源，歡迎關注專欄：學習編程第一：Python爬蟲學習系列教程Python版本：2.7整體目錄：一、爬蟲入門?Python爬蟲入門一之綜述?Python爬蟲入門二之爬蟲基礎了解?Python爬蟲入門三之Urllib庫的基本使用?Python爬蟲入門四之Urllib庫的高級用法?Python爬蟲入門五之URLError異常處理?Python爬蟲入門六之Cookie的使用?Python爬蟲入門七之正則表達式二、爬蟲實戰?Python爬蟲實戰一之爬取糗事百科段子?Python爬蟲實戰二之爬取百度貼吧帖子?Python爬蟲實戰三之實現山東大學無線網絡掉線自動重連?Python爬蟲實戰四之抓取淘寶MM照片?Python爬蟲實戰五之模擬登錄淘寶并獲取所有訂單?Python爬蟲實戰六之抓取愛問知識人問題并保存至數據庫?Python爬蟲實戰七之計算大學本學期績點?Python爬蟲實戰八之利用Selenium抓取淘寶匿名旺旺三、爬蟲利器?Python爬蟲利器一之Requests庫的用法?Python爬蟲利器二之BeautifulSoup的用法?Python爬蟲利器三之Xpath語法與lxml庫的用法?Python爬蟲利器四之PhantomJS的用法?Python爬蟲利器五之Selenium的用法?Python爬蟲利器六之PyQuery的用法四、爬蟲進階?Python爬蟲進階一之爬蟲框架概述?Python爬蟲進階二之PySpider框架安裝配置?Python爬蟲進階三之爬蟲框架Scrapy安裝配置?Python爬蟲進階四之PySpider的用法第二（第一的姊妹篇）：Python爬蟲入門教程Python版本：2.7教程目錄：?[Python]網絡爬蟲（一）：抓取網頁的含義和URL基本構成?[Python]網絡爬蟲（二）：利用urllib2通過指定的URL抓取網頁內容?[Python]網絡爬蟲（三）：異常的處理和HTTP狀態碼的分類?[Python]網絡爬蟲（四）：Opener與Handler的介紹和實例應用?[Python]網絡爬蟲（五）：urllib2的使用細節與抓站技巧?[Python]網絡爬蟲（六）：一個簡單的百度貼吧的小爬蟲?[Python]網絡爬蟲（七）：Python中的正則表達式教程?[Python]網絡爬蟲（八）：糗事百科的網絡爬蟲（v0.3）源碼及解析(簡化更新)?[Python]網絡爬蟲（九）：百度貼吧的網絡爬蟲（v0.4）源碼及解析?[Python]網絡爬蟲（十）：一個爬蟲的誕生全過程（以山東大學績點運算為例）?[Python]網絡爬蟲（11）：亮劍！爬蟲框架小抓抓Scrapy閃亮登場！?[Python]網絡爬蟲（12）：爬蟲框架Scrapy的第一個爬蟲示例入門教程（九）Python開發微信公眾號我的第一個Python項目就是做的微信公眾號機器人，按照當時我的思路來講講如何學習使用Python來開發微信公眾號：大家伙收藏順手點個贊唄。微信公眾號功能開發分為兩大塊：需要調用微信內部功能、不需要調用微信內部功能，重點在調用微信內部功能組建。些容器對象，比如list、dict、tuple，instance等可能會出現引用循環，對于這些循環，垃圾回收器會定時回收這些循環（對象之間通過引用（指針）連在一起，構成一個有向圖，對象構成這個有向圖的節點，而引用關系構成這個有向圖的邊）。分代收集：Python把內存根據對象存活時間劃分為三代，對象創建之后，垃圾回收器會分配它們所屬的代。每個對象都會被分配一個代，而被分配更年輕的代是被優先處理的，因此越晚創建的對象越容易被回收。如果你想要深入了解Python的GC機制，點擊這里：[轉載]Python垃圾回收機制--完美講解!（四）、Python多線程（multi-threading）。這是個好主意嗎？Python并不支持真正意義上的多線程，Python提供了多線程包。Python中有一個叫GlobalInterpreterLock（GIL）的東西，它能確保你的代碼中永遠只有一個線程在執行。經過GIL的處理，會增加執行的開銷。這就意味著如果你先要提高代碼執行效率，使用threading不是一個明智的選擇，當然如果你的代碼是IO密集型，多線程可以明顯提高效率，相反如果你的代碼是CPU密集型的這種情況下多線程大部分是雞肋。想要深入詳細了解多線程，點擊這里：詳解Python中的多線程編程_python想了解一下IO密集和CPU密集可以點擊這里：CPU-bound(計算密集型)和I/Obound(I/O密集型)（五）、說明os,sys模塊不同，并列舉常用的模塊方法？