WEB站点访问者身份识别
登录
点击启动靶场环境
访问靶场
解题找到KEY
提交KEY
发表解题思路
完成
背景介绍
每个WEB站点上线后，都会被各个搜索引擎收录，每个搜索引擎都有相对应的爬虫蜘蛛，爬虫在抓取站点内容时，都多少会造成一定的流量或影响。假如某个业务系统不想让搜索引擎收录怎么办？
实训目标
1、了解robots.txt文件；
2、了解robots.txt的内容含义；
3、了解各个搜索引擎的蜘蛛标识；
解题方向
根据页面提示，获取相对应的结果。
靶场设计者
当前靶场共有11241人浏览，
已有561人完成
该功能稍候开放！
墨者
墨者学院，专注于网络安全人才培养！
渝公网安备
评论(请勿在评论区发表解题思路)
大神，发表一下您的看法吧！登录立即注册