疑问：网站robots文件可以加sitemaptxt吗？

答覆：可以添加，但作用不会很大！比如百度搜索，在资源平台里面有专门的通道提交网站地图文件，不需要再提交。

这也是搜外问答上面有朋友提出的疑问，之所以想要在robots里面参加sitemaptxt，主要目标还是想让蜘蛛去抓取网站地图。这种担心或者是其他方法，其实都是过剩的，理论上说，不管我们是否提交了sitemap文件，搜索引擎都会去网站根目录下查找，看看是否存在网站地图，有则优先抓取。

假如我们制作并且提交了sitemaptxt，以及sitemapxml等文件，但蜘蛛仍然没有抓取，那就可能显露疑问了。当然这个疑问可能是搜索引擎方面的，也可能是网站方面的，比如说服务器不不乱，或者域名被惩罚等等。

对于新站，最近这段时间，百度搜索的抓取还是很慢的，尤其是刚上线的站点，十天八天都不来抓取也是正常的。假如你刚好在做新站，遇到了没有蜘蛛抓取的疑问，建议还是稳住心态，悄悄等待就行。

总之而言，robots文件里面可以加sitemaptxt，搜索引擎不会因此就惩罚网站。但是，这样加了sitemaptxt文件，也根本没有功效的，所以大家要正确懂得这个疑问。