国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 語言 > JavaScript > 正文

scrapyd schedule.json setting 傳入多個值問題

2024-05-06 15:36:08
字體:
來源:轉載
供稿:網友

使用案例:

import requestsadder='http://127.0.0.1:6800'data = {    'project':'v1',    'version':'12379',    'setting':['ROBOTSTXT_OBEY=True','CONCURRENT_REQUESTS=32']}resp = requests.post(adder,data=data)

問題解決思路:

版本1.2文檔中:

◦setting (string, optional) - a Scrapy setting to use when running the spider

setting 是字符串,那么多個字符串該如何呢。

通過源碼 site-packages/scrapyd/webservice.py

class Schedule(WsResource):  def render_POST(self, txrequest):    args = native_stringify_dict(copy(txrequest.args), keys_only=False)    settings = args.pop('setting', [])    settings = dict(x.split('=', 1) for x in settings)    args = dict((k, v[0]) for k, v in args.items())    project = args.pop('project')    spider = args.pop('spider')    version = args.get('_version', '')    spiders = get_spider_list(project, version=version)    if not spider in spiders:      return {"status": "error", "message": "spider '%s' not found" % spider}    args['settings'] = settings    jobid = args.pop('jobid', uuid.uuid1().hex)    args['_job'] = jobid    self.root.scheduler.schedule(project, spider, **args)    return {"node_name": self.root.nodename, "status": "ok", "jobid": jobid}

 可以發現 setting 在這里是list對象,且里面元素是字符,字符串必須包含=符號。

以此我們嘗試傳入setting:['DEBUG=True','HOST_NAME=axdda']

結果真的可以。對于比較復雜的設置,下次有需求再研究吧。

總結

以上所述是小編給大家介紹的scrapyd schedule.json setting 傳入多個值問題,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對錯新站長站網站的支持!
如果你覺得本文對你有幫助,歡迎轉載,煩請注明出處,謝謝!

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表

圖片精選

主站蜘蛛池模板: 灯塔市| 清流县| 云林县| 元阳县| 锦屏县| 大厂| 桐柏县| 安达市| 洞口县| 威海市| 边坝县| 通州市| 青岛市| 蓬莱市| 乡宁县| 佛教| 涿州市| 兴仁县| 田阳县| 玛曲县| 沙田区| 社旗县| 察雅县| 吴旗县| 玉树县| 岑巩县| 顺平县| 建阳市| 葵青区| 庆城县| 壶关县| 呼玛县| 石景山区| 巩留县| 东丽区| 东乡族自治县| 海盐县| 玉门市| 延吉市| 通江县| 镶黄旗|