推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
如果用 scrapy 抓取多个不同的站点放在同一个 spider 里,用下面哪种方法好点?
python30 · 2019-09-27 19:45:28 +08:00 · 3110 次点击这是一个创建于 1914 天前的主题，其中的信息可能已经有所发展或是发生改变。
 |
1
gaojin 2019-09-27 23:52:22 +08:00
看解析规则吧，
如果规则都一样，就全部丢到 start_urls 里面最方便了 否则还是分开。。。 |
 |
2
tisswb 2019-09-29 15:34:45 +08:00
除了 name 外 其他都做成需要输入的变量是可行的，比如：allowed_domains, start_urls, rules，以前做舆情蜘蛛就这么办的。
|
Select Language