新闻资讯

新闻资讯 媒体报道

网站SEO检查-网站地图sitemap和robots文件

编辑:005     时间:2020-09-29

背景:对于SEO从业者来说,当入职某个企业并负责一个网站的搜索引擎优化时,第一步就是对网站的SEO检查,查看网站是否设置sitemap文件和robots文件,如果没有这些文件我们该如何设置和操作呢?进入某个企业,负责网站SEO的项目,对于一个已经完工上线的网站,seo从业者首先要做的就是对该网站作检查,查看网站是否符合优化基础,是否已经做过SEO的相关设置,并查看其设置能否符合要求,本文就简要介绍网站SEO检查中比较基础的sitemap地图和robots文件。

sitemap网站地图

sitemap网站地图的意义:建站公司设置的网站地图一般是html格式的静态列表页面,其作用主要是方便浏览者查看网站的主要内容并作出归类和引导,而对于一个SEO从业者来说,我们所说的网站地图是服务搜索引擎蜘蛛或者爬虫的。Google、雅虎、和微软都支持一个被称为xml网站地图(xml Sitemaps)的协议,而百度Sitemap是指百度支持的收录标准,在原有协议上做出了扩展。百度sitemap的作用是通过Sitemap告诉百度蜘蛛全面的站点链接,优化自己的网站。百度Sitemap分为三种格式:txt文本格式、xml格式、Sitemap索引格式。这些对应的sitemap可以更好的向搜索引擎展示站内链接,也更好的给予蜘蛛爬虫抓取提示,当然并不是说sitemap里面的链接都会被收录,但是SEO本来就是一个细节决定成败,量变产生质变的过程,一个有利的方法都是可取的。

网站sitemap文件的检查:网站地图文件基本放置在根目录中,所以直接在你的网站域名后添加“/sitemap.xml”或者“sitemap.txt”,就可以知道网站是否建立sitemap地图文件,如下图所示:


如何建立一个sitemap地图文件:在检查的时如果没有发现网站地图文件,咱们就得建立一个。如果网站内链不多可以一条一条编辑,具体编辑方法这里不做赘述,因为枭帅也不推荐,很容易出错,枭帅建议使用第三方sitemap地图制作软件,比如超人气的sitemapx,或者老站长常用的爱站SEO工具,傻瓜式操作,基本默认就可以。下面以爱站SEO工具来介绍,不限定,看个人爱好。进入工具包选择网站地图如图所示,添加分类和域名,这一步可以默认选项;

第二步则是XML设置,建议权重分配以0.1逐级递减,每页最大网页数按照自己需求设定,修改频率尽量符合你的网站更新频率即可;

第三步则是网站robots文件设置,具体规则可点击查询,此工具包在设置网站地图时则顺带添加了这个文件,具体的作用和编辑方法后续介绍,最后高级设置对于新手用不着,点击抓爬,抓爬完成后打开其文件目录,将所有文件上传至网站根目录即可,注意文件目录中sitemap.xsl文网站地图的样式文件,也要一并上传,否则会出现打开空白或乱码的情况。

网站robots文件

网站地图文件是方便搜索引擎查询网站,为收录提供便利,那么robot.txt文件就类似定义搜索引擎抓爬规则的协议。robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的。那么问题来了,哪些文件或者目录是不希望搜索引擎抓取和访问的呢?网站是否包含robots.txt文件查看方法和网站地图方法一致,在域名后添加“/robots.txt”。在你网站的FTP中,哪些网页文件是应该定义不被访问的呢?比如网站后台登录地址,JS代码文件夹,插件或者图片文件夹,再或者任何你不需要搜索引擎访问的文件和文件夹,设置方法和规则上面已经介绍了,如果不清楚可以默认该文件,后期会陆续更新具体的设置方法和协议书写规则。

本内容属于网络转载,文中涉及图片等内容如有侵权,请联系编辑删除


郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。

回复列表

相关推荐