当前位置: 首页> 网站优化

为什么建议将sitemap网站地图写入robots.txt文件

发布时间:20-05-07

一、认识robots文件

我们知道,robots.txt文件▊告诉蜘蛛程序在服务器上什么文件是ↆ可以被查看的,什么是不可以被查看的▔,蜘蛛知道了这些以后,就〒可以将所有的精力放在被我们允▧许访问|︴()〔〕的页面上面,从而将有限的权重集中起来。

同时,我们还不能互略最重要的一点就是,robots.txt是⿳搜索引擎访问网站要查看的第一个文件。明白∝了这一∑点,我们就有必要,也可能针对这一条做一些文章。

二、将si◄●temaぷp.xml写入robots文件

前面提到◥了,robots.txt文件是搜索引擎中访问网站要查看的第一个文件,那么,如果我们将sitemap.xml(网站地图)文件地址写入robots.txt文件里面,自然∧而然会被搜索引擎蜘蛛在第一时间发现,也增大了网站页面∴被快速抓取和收录的可能性。此种做法,对于新站作用∵明显Ⅷ,对于大站更♀具有积极和现实的作用。

具体写法示例如下:

所以,无论是新站还是老站,为了使得更多的页面╟被搜索引擎抓取,有必要将sitemap.xml写入robots.txt文件Ⅸ中。

Ё

三、Sitemap.xml文件的获⊙取

前面讲了那么多,可能很多人∕还不是很明白,sΠitemapμ.xml文件究竟如何攻取呢?

给大家提供一个工具,也是θ谷歌官方推荐的sitemap.xml在线生成工具,http://www.xml-sitemaps.com/,大家可以根据里面的选项选择适合⿻自己网站的sitemapЦ.xml生成样式。生成sitemΥap.xml后,♤一般÷需要将该文件放置在根目录下面即可。

综上∈,把sitemap.xml地址写入robots.txↃt文件,从而提升页面抓取率的※方式是可行的,也是具有可操作性的。

实际上对‖于goog℡le来说,提交sitemaps.xml可以使得网站的收录比较快而◙且全,但是百度没有sitemap的专门提交地址,因↹此大家往往忽视向百度提交┗sitemap的重要性。
那─━么怎么向百度提交sitemap呢?

最×好的办法就是在robots.txt中写入网站sitemap地址。

比如我的网站s⿷itemap地址为:http://www.lichλuping.co⊙m/sitema◎ps.xml

那么在&⌒nbsp;http://www.lichuping.coαm /robots.txt中写入一段命令:

Sitemap:  @http://www.lichu〣ping.com /site◥maps.xml

然后再向百度submit你的网站地址。这样网站被百度收录的速度将会有所提升。

还有多少网站是不写robots.txt的啊,学习一下它的命令吧。

上一篇: GWI:98%的成年网民是社交媒体用户
下一篇: 大摩将百度评级调高至增持 目标价升至239美元