这一讲我来给大家介绍一下seo学习中如何写robots文件，以及如何使用robots文件？其实robots文件非常重要，robots文件可以控制搜索引擎对我们的网站访问，例如如果我们不想百度访问我们的空间就可以例如robots文件屏蔽掉机器人访问就可以了。下面就具体的来介绍一下robots文件吧。

robots.txt的写法：首先：robots.txt的命名，都应该是小写。

robots.txt文件中一般至少要包含一个Disallow：

如果都允许收录，你可以写一行Disallow:/search.html

即使这个文件(searchhtml)就不存在也没关系。

robots.txt写法格式：User-agent: * Disallow: /search.html

Disallow: /index.asp?

Disallow: /Images/

User-agent: * 星号说明，允许所有的搜索引擎来收录

Disallow: /search.html  说明不允许收录 /search.html 这个文件

Disallow: /index.asp?  说明不允许收录以index.asp?为前缀的链接如：index.asp?boardid=1、index.asp?/search等等。

Disallow: /Images/  说明不允许收录/Images/里的所有文件。但可以收录如：/Images.asp 的链接。robots文件的使用方法如下：

1、可以告诉搜索引擎哪些URL是可以收录的。2、可以屏蔽的站点死连接，错误连接。

3、可以屏蔽网站上存在一些比较大的文件、比如：打包文件、大图片文件、音乐文件、或电影文件、日志文件夹等等。屏蔽掉这些文件的愿意是因为这些文件对网站资源流量占用都比较多所以要屏蔽掉。

本文固定链接: http://www.hosteasecn.com/?p=569 | 网络营销_产品运营_营销策划_整合营销_运营策划学习