robots.txt文件屏蔽css导致网站收录停止
昨天和主管聊搜索引擎蜘蛛抓取网页的特点，主管一句话“百度蜘蛛抓取网页层次浅，如果用robots.txt文件静止，则