首页 > 问答 > 关于网站地图和robots.txt的问题

关于网站地图和robots.txt的问题

[导读]:网站地图html和xml格式的两种都要写吗?写好后怎样写进robots.txt里,格式是怎样的? 从百度站长工具中的Sitemap工具,可以得出: 1、百度现在已经能够很好的识别xml格式的网站地...

网站地图html和xml格式的两种都要写吗?写好后怎样写进robots.txt里,格式是怎样的?

从百度站长工具中的Sitemap工具,可以得出:
1、百度现在已经能够很好的识别xml格式的网站地图了。建议做一个
2、html地图同样可以写个,尤其是站内分类比较多的网站。
这样能够让帮助进入网站的用户精准的找到小分类(需要在页面中给入口哟)
3、若网站程序不能自动生成xml文件的网站地图,可以使用第三方软件生成,
如:Sitemap X
4、Robots.txt文件中的sitemap写法可以参考:

User-agent: *
Disallow: /diy/
-- 中间这部分为你网站需要屏蔽抓取的内容 --
Sitemap: http://

###

最好都做一下,百度喜好html,google喜好xml,写好后只要把地图路径写进Robots.txt里面就可以了

###

建议都做
其中,网站地图中的html地图是给用户来看的,方便用户来找到自己想要的东西或者栏目,一般放在醒目的位置。而XML是给搜索引擎来看的。目前百度、谷歌等都支持XML地图了,方便搜索引擎抓取我们的网站有多少内容和链接,减少了链接没被抓取的可能。
xml地图可以写在Robots里面,也可以直接在网站上面展示也可以。
写在robots里面的方法:
User-Agent: *
Allow: /
Sitemap:网址/网站上展示的方法:即直接在网站上调用这个链接就可以了。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/26379.html