国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

零基礎寫python爬蟲之抓取百度貼吧代碼分享

2020-02-23 06:07:47
字體:
來源:轉載
供稿:網友

這里就不給大家廢話了,直接上代碼,代碼的解釋都在注釋里面,看不懂的也別來問我,好好學學基礎知識去!

代碼如下:
# -*- coding: utf-8 -*-
#---------------------------------------
#   程序:百度貼吧爬蟲
#   版本:0.1
#   作者:why
#   日期:2013-05-14
#   語言:Python 2.7
#   操作:輸入帶分頁的地址,去掉最后面的數字,設置一下起始頁數和終點頁數。
#   功能:下載對應頁碼內的所有頁面并存儲為html文件。
#---------------------------------------
import string, urllib2
#定義百度函數
def baidu_tieba(url,begin_page,end_page):  
    for i in range(begin_page, end_page+1):
        sName = string.zfill(i,5) + '.html'#自動填充成六位的文件名
        print '正在下載第' + str(i) + '個網頁,并將其存儲為' + sName + '......'
        f = open(sName,'w+')
        m = urllib2.urlopen(url + str(i)).read()
        f.write(m)
        f.close()
#-------- 在這里輸入參數 ------------------
# 這個是山東大學的百度貼吧中某一個帖子的地址
#bdurl = 'http://tieba.baidu.com/p/2296017831?pn='
#iPostBegin = 1
#iPostEnd = 10

bdurl = str(raw_input(u'請輸入貼吧的地址,去掉pn=后面的數字:/n'))
begin_page = int(raw_input(u'請輸入開始的頁數:/n'))
end_page = int(raw_input(u'請輸入終點的頁數:/n'))
#-------- 在這里輸入參數 ------------------
#調用
baidu_tieba(bdurl,begin_page,end_page)

以上就是python抓取百度貼吧的一段簡單的代碼,非常的實用吧,各位可以自行擴展下。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 兴和县| 拉萨市| 沙湾县| 贡觉县| 阜宁县| 罗定市| 南川市| 苍山县| 铁岭市| 元朗区| 万州区| 福鼎市| 陵川县| 嘉鱼县| 文安县| 新丰县| 故城县| 清河县| 东平县| 双峰县| 金乡县| 宁武县| 那坡县| 灵寿县| 赤城县| 唐海县| 孝义市| 曲沃县| 子洲县| 凤凰县| 临沂市| 开阳县| 湘潭县| 尼玛县| 宁武县| 徐汇区| 泰兴市| 济阳县| 上高县| 峡江县| 肥西县|