国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

python爬取酷狗音樂排行榜

2020-02-16 01:15:34
字體:
供稿:網(wǎng)友

本文為大家分享了python爬取酷狗音樂排行榜的具體代碼,供大家參考,具體內(nèi)容如下

#coding=utf-8from pymongo import MongoClientimport time import requests from lxml import etree  client = MongoClient()      #連接mongohello = client.hello       #連接數(shù)據(jù)庫user = hello.song         #連接表 headers = {   'User-Agent': 'Mozilla/5.0 (Android 6.0; Nexus 5 Build/MRA58N)/  AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Mobile Safari/537.36'}  def get_info(url):   '''  get源碼,encode,解析,xpath,保存   '''  response = requests.get(url, headers=headers)   response = response.text.encode('utf-8')   selector = etree.HTML(response)   soup = selector.xpath('//*[@class="pc_temp_songlist "]/ul//li/a/text()')    #保存到本地  # with open('aa.txt','a') as f:    # for i in soup:      # f.write(i.encode('utf-8') + '/n')   #存入數(shù)據(jù)庫  for i in soup:    user.insert({'song': i}) if __name__ == '__main__':   urls = ['http://www.kugou.com/yy/rank/home/{}-8888.html?from=rank'.format(str(i)) for i in range(1, 24)]   for url in urls:     print(url)     get_info(url)

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持武林站長站。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
主站蜘蛛池模板: 庄浪县| 白玉县| 申扎县| 县级市| 邛崃市| 连江县| 兴仁县| 子洲县| 姚安县| 右玉县| 苏州市| 介休市| 交口县| 炉霍县| 合肥市| 天全县| 铜山县| 河西区| 施秉县| 尚志市| 泊头市| 峨山| 平度市| 古丈县| 武安市| 灵宝市| 绥滨县| 叶城县| 田阳县| 安新县| 海南省| 鹤山市| 丹棱县| 祁东县| 西藏| 绥宁县| 延边| 定结县| 锦屏县| 迭部县| 清徐县|