V2EX › Codewj 的所有回复 › 第 1 页 / 共 2 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2

❮

❯

2021-05-26 17:09:34 +08:00

回复了 saki22oimo 创建的主题 › 程序员 › 检查图片隐藏式水印

https://blog.csdn.net/welggy/article/details/114655285?spm=1001.2014.3001.5501
那当然是从盲水印的实现方案找解决方案了

2021-05-14 15:50:12 +08:00

回复了 Colorful 创建的主题 › Python › 关于爬虫这块有个比较好奇的问题，想请教

https://onejane.github.io/2021/04/09/%E7%88%AC%E8%99%AB%E5%9F%BA%E7%A1%80%E7%AF%87%E4%B9%8BScrapy%E6%8A%93%E5%8F%96%E4%BA%AC%E4%B8%9C/#%E4%BF%9D%E5%AD%98%E5%88%86%E7%B1%BB%E6%95%B0%E6%8D%AE
scrapy_redis 现成的组件直接套用即可，配置几行代码就行了，本质就是使用 redis 对 url 生成的指纹通过中间件进行去重实现

2021-04-28 15:42:23 +08:00

回复了 szxczyc 创建的主题 › 问与答 › 大家的博客都会写一些什么内容呢

记录一些日常学习的笔记，毕竟许久不用的技术容易忘记。https://onejane.github.io/

2021-04-22 18:52:40 +08:00

回复了 ZoeYn 创建的主题 › Python › 有没有比较优雅的合并两个列表的方法？

https://onejane.github.io/2021/02/22/%E5%BC%BA%E5%A4%A7%E7%9A%84%E8%84%9A%E6%9C%AC/#%E6%8E%92%E5%88%97%E7%BB%84%E5%90%88

2020-04-03 11:28:40 +08:00

回复了 ace12 创建的主题 › 问与答 › 领导让我爬全量工商数据，我该怎么办

我爬了，给公安用的

2019-11-11 13:18:07 +08:00

回复了 KnownsecACT 创建的主题 › 推广 › 知道创宇双十一活动已开启，欢迎朋友们来选购合适的安全产品！ [老规矩，内有抽奖]

报道报道嘿嘿嘿

2019-08-23 12:59:50 +08:00

回复了 weiruanniubi 创建的主题 › 分享创造 › 小白瑟瑟的发出自己的博客，期待友情链接……

日更友链呀 https://onejane.github.io/

2018-03-23 09:34:01 +08:00

回复了 PorUnaCabeza 创建的主题 › 程序员 › 职业发展上的困惑，虚心求教

这就是你徐州郑恺不靠脸吃饭的理由？？？

2018-01-29 09:19:41 +08:00

回复了 Codewj 创建的主题 › Python › Python 分布式的一点小疑问

@zyy1245367562 戳到痛处了

2018-01-25 12:14:53 +08:00

回复了 Codewj 创建的主题 › Python › Python 分布式的一点小疑问

@beforeuwait 谢谢🙏

2018-01-24 22:44:25 +08:00

回复了 Codewj 创建的主题 › Python › Python 分布式的一点小疑问

@ilovebaicai 理解了，谢谢哥

2018-01-24 13:52:01 +08:00

回复了 Codewj 创建的主题 › Python › Python 分布式的一点小疑问

或者说不配置的话，分布式体现在哪里

2018-01-24 13:51:17 +08:00

回复了 Codewj 创建的主题 › Python › Python 分布式的一点小疑问

@yangzhezjgs 关于通过 redis_scrapy 实现分布式爬虫里有个配置，redispipline，如果不配置将不会生成 item 到 redis 中，一般都不配置，为了提高爬取存储性能，所以问题是不配置导致不存储，那分布式的意义是什么

1 2

❮

❯