群利营销

在和搜索引擎打交道的过程中，良好的互动有的时候需要robots.txt文件的帮助，正确使用robots.txt文件，可以避免网页复制等诸多问题，然而，robots文件的使用，要慎之又慎。

在不熟悉robots.txt的规范的时候，很多意外情况，都是由于使用robots不当引起的

比如，群利的个人博客山上渔夫博客，前段时间加了robots.txt，一段时间之后，群利发现博客的谷歌收录数量大为减少，非常不正常。因为平时谷歌收录大于百度，而现在百度的收录是谷歌的两倍多。当时，群利也没有过于在意。

...

群利网络营销策划开始了自己的电子商务之路的探索，群利所采用的程序系统是shopex所提供的。网络营销从网站建设之处就要开始了，而不是在建完成网站之后才问，改怎样进行网络营销及网站优化！所以，在基本了解了shopex的结构之后，写了一个robots.txt文件，来引导和控制搜索引擎蜘蛛，以引导使其避免做无用功，同时让收录的内容更加有利于电子商务网站的用意！robots.txt文件如下：User-ag

robots用于定义网页搜索引擎索引方式

robots出现在name属性中，使用content属性定义网页搜索引擎索引方式

通过使用meta的robots属性值可以为没有文件上传权限的用户提供/robots.txt文件的所有功能

robots语法
...