国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

Python實現(xiàn)登錄人人網(wǎng)并抓取新鮮事的方法

2020-02-23 01:11:05
字體:
供稿:網(wǎng)友

本文實例講述了Python實現(xiàn)登錄人人網(wǎng)并抓取新鮮事的方法。分享給大家供大家參考。具體如下:

這里演示了Python登錄人人網(wǎng)并抓取新鮮事的方法(抓取后的排版不太美觀~~)

from sgmllib import SGMLParserimport sys,urllib2,urllib,cookielibclass spider(SGMLParser):  def __init__(self,email,password):    SGMLParser.__init__(self)    self.h3=False    self.h3_is_ready=False    self.div=False    self.h3_and_div=False    self.a=False    self.depth=0    self.names=""    self.dic={}      self.email=email    self.password=password    self.domain='renren.com'    try:      cookie=cookielib.CookieJar()      cookieProc=urllib2.HTTPCookieProcessor(cookie)    except:      raise    else:      opener=urllib2.build_opener(cookieProc)      urllib2.install_opener(opener)      def login(self):    url='http://www.renren.com/PLogin.do'    postdata={         'email':self.email,         'password':self.password,         'domain':self.domain          }    req=urllib2.Request(              url,              urllib.urlencode(postdata)                    )    self.file=urllib2.urlopen(req).read()    #print self.file  def start_h3(self,attrs):    self.h3 = True  def end_h3(self):    self.h3=False    self.h3_is_ready=True  def start_a(self,attrs):    if self.h3 or self.div:      self.a=True  def end_a(self):    self.a=False  def start_div(self,attrs):    if self.h3_is_ready == False:      return    if self.div==True:      self.depth += 1    for k,v in attrs:      if k == 'class' and v == 'content':        self.div=True;        self.h3_and_div=True  #h3 and div is connected  def end_div(self):    if self.depth == 0:      self.div=False      self.h3_and_div=False      self.h3_is_ready=False      self.names=""    if self.div == True:      self.depth-=1  def handle_data(self,text):    #record the name    if self.h3 and self.a:      self.names+=text    #record says    if self.h3 and (self.a==False):      if not text:pass      else: self.dic.setdefault(self.names,[]).append(text)      return    if self.h3_and_div:      self.dic.setdefault(self.names,[]).append(text)  def show(self):    type = sys.getfilesystemencoding()    for key in self.dic:      print ( (''.join(key)).replace(' ','')).decode('utf-8').encode(type), /         ( (''.join(self.dic[key])).replace(' ','')).decode('utf-8').encode(type)renrenspider=spider('your email','your password')renrenspider.login()renrenspider.feed(renrenspider.file)renrenspider.show()

希望本文所述對大家的Python程序設(shè)計有所幫助。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
主站蜘蛛池模板: 萨迦县| 平定县| 五指山市| 湄潭县| 嘉黎县| 聂拉木县| 望江县| 和政县| 平利县| 杂多县| 健康| 桃江县| 南靖县| 华阴市| 定远县| 大竹县| 阳原县| 旌德县| 来安县| 平和县| 丰镇市| 金乡县| 宽甸| 铁力市| 胶南市| 常山县| 报价| 佛山市| 塔河县| 武威市| 海门市| 新安县| 文安县| 松江区| 隆子县| 临桂县| 遂平县| 吉水县| 邵东县| 花莲县| 安仁县|