今天，小虫提醒我，你的robots写法有问题，说我的站点还有很多无关的内容如“admin”和后台的内容不该让搜索引擎收录的，收录了容易让黑客扫到，不安全。我想想也是的，于是就马上借鉴了小虫的robots的写法。再回到后台看看哪些目录和文件没必要让搜索引擎知道的，看看要不要禁。其实，一直以来，我都没认真对待好这个robots的，只大概地知道怎么写，可是就没想想根据自己的情况怎样去写好里面的内容。现在回想一下，也怪不得我的另一个站点前段时间会被入侵，可能没写好robots也是一个很重要的原因。而且，我也觉得，那些没必要让搜索引擎知道的内容其实也是不好的内容，对搜索引擎来说，这些内容它虽然会收录，但终究会反感的，所以为了自己网站的安全和对搜索引擎友好点，云浮SEO建议各位站长朋友还是认真写好自己的robots.txt。