首页 > robots

robots

  •   通过WordPress建立的网站,里面的robots相比大家应该也都不陌生,一些新手站长对robots的写法设置存在一些问题,通常只有合理的设置才有利于优化网站。那么,如何通过robots.txt设置进行wordpress博客的优化了,下面就为大家进行分析。

      一、robots.txt的基本概念:

      robots.txt文件是存放在网站的根目录下面的ASCII编码得文本文件,其就是告诉搜索引擎的漫游器,作用是释放信息告诉搜素引擎哪些内容是不需要进行获取的,那些是需要获取的。该文件也是规定spider在网站中抓取的范围,也是对网站的一些隐秘文件进行保护,并且防止站点的页面被网站重复的抓取。

      robots.txt目前也就是一种协议,并不是什么标准,因此搜素引擎robots.txt协议中的指令参数存在多种看待。

      二、robots.txt使用注意事项:

      1、对大小写指令存在区分,未知的指令则被忽视;

      2、指令是一行代表一个,出现的隔行与空白是被忽略的;

      3、“#”之后出现的字符参数也都会被忽略;

    Wordpress

    阅读全文

同步内容