如何用python爬取微信朋友圈那些發(fā)布過(guò)圖片的視頻

　　搜索引擎如何抓取網(wǎng)頁(yè)？百度，谷歌，360等搜索引擎都提供現成網(wǎng)頁(yè)文本抓取程序，方便用戶(hù)進(jìn)行抓取，谷歌的抓取程序就存放在spiders文件夾中，安裝好谷歌搜索引擎抓取程序后，只需要一些代碼就可以抓取谷歌，百度等等網(wǎng)站的網(wǎng)頁(yè)內容。那么今天我來(lái)給大家分享如何用python爬取微信朋友圈那些發(fā)布過(guò)圖片，視頻，朋友圈評論，廣告等信息。

　　首先對python的爬蟲(chóng)爬取網(wǎng)頁(yè)內容的方法進(jìn)行簡(jiǎn)單的說(shuō)明。以我們熟悉的百度搜索引擎為例，首先進(jìn)入到百度的博客內容頁(yè)，隨便找一篇文章，進(jìn)行下載。（其實(shí)這個(gè)方法在知乎也有分享，所以直接用代碼爬取微信朋友圈的內容，這個(gè)第四節會(huì )再講，有興趣的朋友可以關(guān)注我的專(zhuān)欄。）其次下載完畢后，對這個(gè)博客進(jìn)行如下的改造：1.采用轉義字符，如"\>>"2.對文本進(jìn)行大小寫(xiě)轉換3.禁止unicode字符轉義4.打開(kāi)一個(gè)文件，然后復制粘貼：%load_datafilename（這個(gè)是保存所有內容的文件名，我復制了2個(gè)文件，這些數據后續會(huì )用到，不同的文件名是由不同的位置存放不同的數據）.爬取結果如下：圖1圖2圖3最后把爬取到的數據粘貼到python的數據庫中：（這個(gè)也是一些常用數據庫的一些基本命令，后續專(zhuān)門(mén)寫(xiě)一篇來(lái)進(jìn)行分享。

　?。┳⒁猓簆ython的數據庫存儲時(shí)間，必須保證是目標網(wǎng)站的同一個(gè)時(shí)間，而我們可以借助于sqlite來(lái)達到同一個(gè)時(shí)間的存儲。