robots文件中要加入sitemap声明吗？

650 主题	805 帖子	2706 积分

管理员

Rank: 9 Rank: 9 Rank: 9

积分: 2706

发消息

发表于 2022-12-4 00:48:13 | 显示全部楼层 |阅读模式

robots文件中要加入sitemap声明吗？

答案是：最好是不要，sitemap地址也不要放在根目录下，隐藏深一点会好一些。
最保险的做法是每个搜索引擎逐个提交sitemap文件，这样可以确保各搜索引擎能够正常抓取sitemap信息而不会有什么情况发生。
另外主要是为了防采集，如果在robots中加入sitemap地址，则等于你将网站内的所有地址都公布并整理出来了，网上大把的工具可以瞬间提取sitemap中的网址。

游客，如果您要查看本帖隐藏内容请回复

sitemap, 加入, 文件, robots, 提取

上一篇：百度sitemap提交后，抓取失败，提示“连接超时”大概率是因为robots封禁
下一篇：百度站长平台的人工处理问题反馈在这里

		自动登录	找回密码
密码			立即注册

robots文件中要加入sitemap声明吗？

相关帖子