百度谷歌搜索爬虫爬些奇怪的东西，news模块早已经关闭搜索功能了。,迅睿框架,Codeigniter/Laravel/ThinkPHP技术文档,PHP开发文档,迅睿CMS框架官方教程

全部问题求助问题分享经验开发需求

迅睿框架版主：迅睿框架研发组

百度谷歌搜索爬虫爬些奇怪的东西，news模块早已经关闭搜索功能了。

zhuroufanzi

类型：迅睿框架更新时间：2020-11-23 23:46:18

百度谷歌搜索爬虫爬些奇怪的东西，news模块早已经关闭搜索功能了。

链接类似这样的

http://m.abc.com/index.php?s=news&c=search&catid=11&keyword=dayruicom

站内应该没有这样的内容

回帖

#1楼曼德拉的铅笔

2020-01-11 12:57:22
Chrome 0

rebox把蜘蛛屏蔽了就行了
#2楼 zhuroufanzi

2020-01-11 13:10:20
华为手机 0

屏蔽蜘蛛的网站不就等于自己hi吗
#3楼 125762285

2020-01-11 16:58:31
Chrome 0

zhuroufanzi是的
#4楼唉呦喂

2020-01-11 18:54:37
华为手机 0

网站没有什么不可以公开的吧

满意答案
#5楼 zhuroufanzi

2020-02-05 12:32:13
Chrome 0

http://www.abc.com/index.php?s=news&c=search&catid=7&keyword=蛛丝马迹这是谷歌来爬，可我站内没有“keyword=蛛丝马迹”这类东西啊
#6楼 zhuroufanzi

2020-11-23 23:46:18
Chrome 0

@唉呦喂：不是不能公开。是这蜘蛛无中生有，我站内没有的