被百度收录的网站,加了 robots.txt 禁止搜寻引擎收录的代码后网站还在?
Sue6080 · 2021-10-28 15:45:48 +08:00 · 1327 次点击这是一个创建于 1120 天前的主题，其中的信息可能已经有所发展或是发生改变。
我有一个被百度收录的网站,加了 robots.txt 禁止搜寻引擎收录的代码,但网站内容不能删除,因为需要给网址让访客直接访问
User-agent:*
Disallow:/
过二个星期后,百度搜寻的结果显示：
由于该网站的 robots.txt 文件存在限制指令（限制搜索引擎抓取），系统无法提供该页面的内容描述
但网站还能正常点开浏览
因此想问,这样是否只需要时间等百度下架我这网站吗?
还是我可以采取什麽做法?
User-agent:*
Disallow:/
过二个星期后,百度搜寻的结果显示：
由于该网站的 robots.txt 文件存在限制指令（限制搜索引擎抓取），系统无法提供该页面的内容描述
但网站还能正常点开浏览
因此想问,这样是否只需要时间等百度下架我这网站吗?
还是我可以采取什麽做法?
 |
1
bug123 2021-10-28 19:08:11 +08:00
加一个鉴权就行了，只有登录账号的人才能访问
|
Select Language