本文實例講述了python使用自定義user-agent抓取網頁的方法。分享給大家供大家參考。具體如下:
下面python代碼通過urllib2抓取指定的url的內容,并且使用自定義的user-agent,可防止網站屏蔽采集器
import urllib2req = urllib2.Request('http://192.168.1.2/')req.add_header('User-agent', 'Mozilla 5.10')res = urllib2.urlopen(req)html = res.read()
希望本文所述對大家的Python程序設計有所幫助。
新聞熱點
疑難解答