为了账号安全，请及时绑定邮箱和手机立即绑定

禁止自己的网站被爬虫爬去？

首页 猿问 禁止自己的网站被爬虫爬去？

禁止自己的网站被爬虫爬去？

爬虫
开心每一天1111 2018-10-03 08:24:57
禁止自己的网站被爬虫爬去？有什么方法啊
查看完整描述

2 回答

?
守着星空守着你

TA贡献1799条经验 获得超8个赞

加一个robots.txt文件，内容：

User-agent: *
Disallow: /


查看完整回答
反对 回复 2018-10-14
  • 2 回答
  • 0 关注
  • 1296 浏览
慕课专栏
更多

添加回答

了解更多

举报

0/150
提交
取消
微信客服

购课补贴
联系客服咨询优惠详情

 帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

 公众号

扫描二维码
关注慕课网微信公众号