国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁(yè) > 開(kāi)發(fā) > JS > 正文

scrapyd schedule.json setting 傳入多個(gè)值問(wèn)題

2024-05-06 16:54:03
字體:
來(lái)源:轉(zhuǎn)載
供稿:網(wǎng)友

使用案例:

import requestsadder='http://127.0.0.1:6800'data = {    'project':'v1',    'version':'12379',    'setting':['ROBOTSTXT_OBEY=True','CONCURRENT_REQUESTS=32']}resp = requests.post(adder,data=data)

問(wèn)題解決思路:

版本1.2文檔中:

?setting (string, optional) - a Scrapy setting to use when running the spider

setting 是字符串,那么多個(gè)字符串該如何呢。

通過(guò)源碼 site-packages/scrapyd/webservice.py

class Schedule(WsResource):  def render_POST(self, txrequest):    args = native_stringify_dict(copy(txrequest.args), keys_only=False)    settings = args.pop('setting', [])    settings = dict(x.split('=', 1) for x in settings)    args = dict((k, v[0]) for k, v in args.items())    project = args.pop('project')    spider = args.pop('spider')    version = args.get('_version', '')    spiders = get_spider_list(project, version=version)    if not spider in spiders:      return {"status": "error", "message": "spider '%s' not found" % spider}    args['settings'] = settings    jobid = args.pop('jobid', uuid.uuid1().hex)    args['_job'] = jobid    self.root.scheduler.schedule(project, spider, **args)    return {"node_name": self.root.nodename, "status": "ok", "jobid": jobid}

 可以發(fā)現(xiàn) setting 在這里是list對(duì)象,且里面元素是字符,字符串必須包含=符號(hào)。

以此我們嘗試傳入setting:['DEBUG=True','HOST_NAME=axdda']

結(jié)果真的可以。對(duì)于比較復(fù)雜的設(shè)置,下次有需求再研究吧。

總結(jié)

以上所述是小編給大家介紹的scrapyd schedule.json setting 傳入多個(gè)值問(wèn)題,希望對(duì)大家有所幫助,如果大家有任何疑問(wèn)請(qǐng)給我留言,小編會(huì)及時(shí)回復(fù)大家的。在此也非常感謝大家對(duì)VeVb武林網(wǎng)網(wǎng)站的支持!
如果你覺(jué)得本文對(duì)你有幫助,歡迎轉(zhuǎn)載,煩請(qǐng)注明出處,謝謝!


注:相關(guān)教程知識(shí)閱讀請(qǐng)移步到JavaScript/Ajax教程頻道。
發(fā)表評(píng)論 共有條評(píng)論
用戶(hù)名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
主站蜘蛛池模板: 澎湖县| 岳池县| 荔波县| 乌兰浩特市| 长子县| 兰溪市| 扎囊县| 稻城县| 博客| 电白县| 饶河县| 米易县| 岳普湖县| 晋城| 兰西县| 牙克石市| 昌宁县| 从化市| 孙吴县| 曲周县| 靖西县| 长沙市| 克拉玛依市| 鄂尔多斯市| 大同县| 太湖县| 邛崃市| 赣榆县| 天气| 漠河县| 苍南县| 龙口市| 耒阳市| 上林县| 田东县| 伊金霍洛旗| 西和县| 邓州市| 连南| 新余市| 共和县|