推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
这是一个创建于 2072 天前的主题，其中的信息可能已经有所发展或是发生改变。
请问在 scrapy-redis 中，构造下一个请求时，直接 yield request 和将 url 入队到 redis 有什么区别？在需求上都可以满足需求，各位大佬推荐用哪种？ 我感觉将 url 入队 redis，这样发起下一个请求是由 scrapy 控制，但如果直接 yield 一个请求，在大量的 request 情况下会不会影响 scrapy 的调度？
 |
1
WilliamYang 2019-03-31 01:39:09 +08:00  1
如果你用了 scrapy-redis 后, 直接 yield request, 调度器会把该次请求及相关参数序列化到 redis 了
|
 |
2
ghd700 OP @WilliamYang 那就是没有区别咯
|
Select Language