怎么设置不让搜索引擎收录某些页面
答案:2 悬赏:60 手机版
解决时间 2021-02-06 16:00
- 提问者网友：轻浮
- 2021-02-06 00:34
怎么设置不让搜索引擎收录某些页面
最佳答案
- 五星知识达人网友：轻熟杀无赦
- 2021-02-06 01:36
使用robots.txt 将这些页面屏蔽掉。
User-agent: BadBot
Disallow: / 后面写想要屏蔽的网址
User-agent: BadBot
Disallow: / 后面写想要屏蔽的网址
全部回答
- 1楼网友：罪歌
- 2021-02-06 02:10
首先，你先建一个空白文本文档（记事本），然后命名为：robots.txt。
（5）禁止spider访问特定目录和特定文件（图片、压缩文件）。
user-agent: *
disallow: /aaa.net/
disallow: /admin/
disallow: .jpg$
disallow: .rar$
这样写之后，所有搜索引擎都不会访问这2个目录。需要注意的是对每一个目录必须分开说明，而不要写出“disallow:/aaa.net/ /admin/”。
我要举报
如以上回答内容为低俗、色情、不良、暴力、侵权、涉及违法等信息，可以点下面链接进行举报！
点此我要举报以上问答信息
大家都在看
推荐资讯