优化robots.txt的时候,怎么不泄露后台等安全信息呢

987seo/2019-11-16/ 分类:seo优化技术/阅读:
相信大家对robots.txt都不陌生,还是不清除的朋友可以看下: robots.txt有什么作用,应该放在网站哪个地方 robots是用来告诉搜索引擎哪些内容是我们不让搜索引擎抓取的。比如我们网站的后台就不希望被搜索抓取,那么robots文件需要这样写: User-agent: * Di ...
相信大家对robots.txt都不陌生,还是不清除的朋友可以看下:robots.txt有什么作用,应该放在网站哪个地方

robots是用来告诉搜索引擎哪些内容是我们不让搜索引擎抓取的。比如我们网站的后台就不希望被搜索抓取,那么robots文件需要这样写:
 
User-agent: *
 
Disallow: /dede/
 
但是这样我们很容易发现了一个问题,如果有人要破解攻击的话,就很容易就知道了后台,一下子就清楚了网站的结构。
 
我们并不想这样!
 
有没有办法让robots.txt既能限制搜索引擎,又不泄露后台地址和隐私目录呢?有!

优化robots.txt的时候,怎么不泄露后台等安全信息呢
 
一、使用通配符(*):
 
User-agent: *
 
Disallow: /d*/
 
这样的写法,禁止所有的搜索引擎抓取根目录下a开头的目录。当您的后台是admok165的话,还有谁会看到呢?
 
二、只写目录前几个字母,不写全:
 
User-agent: *
 
Disallow: /de
 
这种的写法,是禁止所有的搜索引擎抓取根目录下ad开头的目录。
 
最后说明一下,以上这两种方法,需要网站目录没有相同字母开头的,例如ad目录,如果有两个一样的,那需在robots.txt文件里再加上一个字母区别开来。


好了,快去看看你的robots.txt有没设置好,是不是将隐秘信息都泄露出来了呢,快点优化哦!要不很容易被黑客盯上的!
 
阅读:
扩展阅读:
精彩评论:
说点什么吧
  • 全部评论(0
    还没有评论,快来抢沙发吧!
腾讯云服务器优惠
腾讯云服务器-全球

热门文章

HOT NEWS
  • 周榜
  • 月榜
阿里云服务器优惠券
987seo网络工作室 - 关注SEOer,站长和创业者的网站
微信二维码扫一扫
关注微信公众号
987studio.com 联系QQ:256707691 邮箱:256707691@qq.com Copyright © 2018-2019 987seo网络工作室 版权所有
987SEO工作室专注seo教程分享,seo技术,网站关键词排名优化,dedecms织梦模板建站教程,技术分享等知识资讯,关键词上百度首页的方法及网站建设相关软件资源下载!一个关注SEOer、站长和创业者的网站
二维码
意见反馈 二维码