robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。           robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的,比如后台的程...