设为首页收藏本站淘宝杂货铺

从F到0 - From F to 0

 找回密码
 注册已关闭
搜索
查看: 1849|回复: 4
收起左侧

[正则/伪静态/Robots] 利用robots.txt文件实现屏蔽所有动态地址的收录(带问号以及任何GET参数的超链接地址)

[复制链接]
发表于 2017-12-24 08:56:16 | 显示全部楼层 |阅读模式
如果网站开启了伪静态功能,并且收录较多的情况下可以屏蔽动态地址。
编辑网站根目录中的robots.txt文件并添加以下内容即可:


  1. User-agent: *
  2. Disallow: /*?*
复制代码

发表于 2017-12-24 10:22:58 | 显示全部楼层
我也来个双击666
发表于 2017-12-26 15:51:08 | 显示全部楼层
不知道屏蔽这玩意有啥用????
发表于 2017-12-28 18:08:50 | 显示全部楼层
谢谢分享咯。
发表于 2018-2-2 20:10:21 | 显示全部楼层
欣欣 发表于 2017-12-26 15:51
不知道屏蔽这玩意有啥用????

有一些用户隐私之类的数据,搜索引擎发现这句话就不再继续出现了。

您需要登录后才可以回帖 登录 | 注册已关闭

本版积分规则

QQ|手机版|Archiver|从F到0 ( 蒙ICP备17002595号-1 )
蒙公网安备15010402000325号

腾讯云安全认证

GMT+8, 2024-5-2 17:18 , Processed in 0.500028 second(s), 17 queries .

Powered by Discuz! X3.4 Licensed

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表