操作:輸入帶分頁的地址,去掉最后面的數字,設置一下起始頁數和終點頁數
功能:下載對應頁碼的所有頁面并儲存為HTML文件,以當前時間命名
代碼:
# -*- coding: utf-8 -*-
#----------------------------
# 程序:百度貼吧的小爬蟲
# 日期:2015/03/28
# 語言:Python 2.7
# 操作:輸入帶分頁的地址,去掉最后面的數字,設置一下起始頁數和終點頁數
# 功能:下載對應頁碼的所有頁面并儲存為HTML文件,以當前時間命名
#----------------------------
import urllib2
import time
def baidu_tieba(url, start, end):
for i in range(start, end):
sName = time.strftime('%Y%m%d%H%M%S') + str(i) + '.html'
print '正在下載第' + str(i) + '個網頁,并將其儲存為' + sName + '...'
f = open(sName, 'w+')
m = urllib2.urlopen(url+str(i))
n = m.read()
f.write(n)
f.close()
print '成功下載'
baiduurl = str(raw_input('請輸入貼子的地址,去掉pn后面的數字>>\n'))
begin_page = int(raw_input('請輸入帖子的起始頁碼>>\n'))
end_page = int(raw_input('請輸入帖子的終止頁碼>>\n'))
baidu_tieba(baiduurl, begin_page, end_page)
以上所述就是本文的全部內容了,希望能夠對大家學習Python制作爬蟲有所幫助。
更多文章、技術交流、商務合作、聯系博主
微信掃碼或搜索:z360901061
微信掃一掃加我為好友
QQ號聯系: 360901061
您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對您有幫助就好】元

