时隔五年,Scrapyd 终于原生支持 basic auth
scrapy/scrapyd/issues/43
scrapy/scrapyd/pull/326
安装
pip install -U git+https://github.com/my8100/scrapyd.git@add_basic_auth
更新配置文件 scrapyd.conf,其余配置项详见官方文档
[scrapyd]username = yourusernamepassword = yourpassword
启动:scrapyd
In [1]: import requestsIn [2]: requests.get('http://127.0.0.1:6800/').status_codeOut[2]: 401In [3]: requests.get('http://127.0.0.1:6800/', auth=('admin', 'admin')).status_codeOut[3]: 401In [4]: requests.get('http://127.0.0.1:6800/', auth=('yourusername', 'yourpassword')).status_codeOut[4]: 200
由于 Scrapyd 的 GitHub 最新提交已经重构了 Jobs 页面,如果正在使用 ScrapydWeb 管理 Scrapyd,则需同步更新 ScrapydWeb:
pip install -U git+https://github.com/my8100/scrapydweb.git
GitHub
my8100/scrapyd
声明:本站所有文章资源内容,如无特殊说明或标注,均为采集网络资源。如若本站内容侵犯了原著者的合法权益,可联系本站删除。