同是闭屏图片和JS代码的robots.txt应该怎么写？
答案:2 悬赏:60 手机版
解决时间 2021-03-01 18:52
- 提问者网友：眉目添风霜
- 2021-02-28 18:53
不叫蜘蛛抓取网站的图片和JS代码的robots.txt应该怎么写？
最佳答案
- 五星知识达人网友：零点过十分
- 2021-02-28 19:17
图片放在images文件夹里的代码Disallow:/images/Disallow:.js$ 禁止所有搜索引擎抓取站内的图片和JSDisallow: /*.jpg$Disallow: /*.jpeg$Disallow: /*.gif$Disallow: /*.png$Disallow: /*.bmp$Disallow:.js$ 仅禁止gooele搜索引擎抓取站内的图片和JSUser-agent:googlebotDisallow: /*.jpg$Disallow: /*.jpeg$Disallow: /*.gif$Disallow: /*.png$Disallow: /*.bmp$Disallow:.js$
全部回答
- 1楼网友：狂恋
- 2021-02-28 19:36
你好！
Disallow: *.jpgDisallow: *.gifDisallow: *.pngDisallow: *.js
如有疑问，请追问。
我要举报
如以上回答内容为低俗、色情、不良、暴力、侵权、涉及违法等信息，可以点下面链接进行举报！
点此我要举报以上问答信息
大家都在看
推荐资讯