坤鹏博客致力于河北石家庄网站推广,沧州网站优化,网站排名,百度排名,企业网站优化的研究与服务,是沧州网站优化,企业网站优化,沧州SEO专业的研究站点

沧州seo:robots.txt文件的格式

作者: 0317  分类: 站长资讯评论: 0人浏览:

沧州seo:说到优化中的robot其实就是指的robots.txt文件

 "robots.txt"文件包含一条或更多的记录,这些记录通过空行分开(以CR,CR/NL, or NL作为结束符),每一条记录的robots.txt格式如下所示:
    "<field>:<optionalspace><value><optionalspace>"。

More...

沧州seo:什么是Robot?

作者: 0317  分类: 站长资讯评论: 0人浏览:

Robot英文直译是机器人,在搜索引擎优化SEO中,我们经常翻译为:探测器。

有时,你会碰到crawler(爬行器),spider(蜘蛛),都是探测器之一,只是叫法不同。

SEO中常说的什么是探测器(Robot)?

robots:  搜索引擎通过一种程序robot(又称spider),自动访问互联网上的网页并获取网页信息。
  您可以在您的网站中创建一个纯文本文件robots.txt,在这个文件中声明该网站中不想被robot访问的部分,这样,该网站的部分或全部内容就可以不被搜索引擎收录了,或者指定搜索引擎只收录指定的内容。

More...