这是一个创建于 1383 天前的主题,其中的信息可能已经有所发展或是发生改变。
想问一下大家搜狐爬虫 bot 的名称是什么?因为之前在搜狐号申请过自媒体入驻,设置了自动同步网站新文章到搜狐号,现在不想用了,但是搜狐并没有提供账户注销功能,想了想,如果在 robots 里屏蔽掉搜狐的爬虫 bot 也是个选择,可是搜狐的爬虫名称怎么写难住我了,有哪位同学知道?
2 条回复 • 2021-05-20 08:19:04 +08:00
 |
|
1
Rxianbei 2021-05-20 04:50:53 +08:00 via Android
你看一下 nginx 的日志,正则一下 sougou 这个关键字不快得多
|
 |
|
2
johnsona 2021-05-20 08:19:04 +08:00 via iPhone
header
|