1、如果你的站点对所有搜索引擎公开则不用做这个文件或者robots.txt为空就行。
搜索引擎已经和我们达成一个约定如果我们按约定那样做了,它们就不要收录
3、robots.txt必须放置在┅个站点的根目录下。如:通过可以成功访问到则说明本站的放置正确。
5、观察这个页面并修改为自己的:补充说明: