全部问题 求助问题 分享经验 开发需求
迅睿框架 版主：迅睿框架研发组
除了使用robots文件禁止蜘蛛抓取，还有什么方法不让蜘蛛抓取某些URL
伟哥
类型：迅睿CMS 更新时间：2022-05-10 17:19:26


除了使用robots文件禁止蜘蛛抓取，还有什么方法可以让文章不生成这些动态链接呢？index.php?s=article&c=search&keyword

image

回帖
  • 迅睿框架技术-罗老师
    #1楼    迅睿框架技术-罗老师
    2022-05-10 17:12:21
    Chrome 0
    首选方法 robots，缺点是识别慢点服务器方法 使用防火墙屏蔽蜘蛛，比如宝塔防火墙有这种设置程序方法 使用程序二次开发来屏蔽蜘蛛特征的地址
  • 伟哥
    #2楼    伟哥
    2022-05-10 17:13:58
    Chrome 0
    迅睿框架技术-罗老师 还是有别的静态内容需要蜘蛛抓取的，咱们系统没有办法设置是吧？
  • 迅睿框架技术-罗老师
    #3楼    迅睿框架技术-罗老师
    2022-05-10 17:18:21
    Chrome 0
    没有设置的地方
    满意答案
  • 伟哥
    #4楼    伟哥
    2022-05-10 17:19:26
    Chrome 0
    @迅睿框架技术-罗老师：好的！设置robots