Discuz!官方免费开源建站系统

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索

[使用] 百度抓取房产为什么一直不停的??

[复制链接]
reless 发表于 2010-12-13 22:18:44 | 显示全部楼层 |阅读模式
百度抓的服务器CPU都100%,看这个日志,把house.php先改名了,就好了,不知道哪里设置有问题了??

2010-12-13 14:16:52 W3SVC473166833 203.191.148.15 GET /house.php rewrite=list-filter-all-city-37-sortid-1-H_rents-1500|2000-H_owner_type-all-H_toward-6-H_decoration-1-cid& 80 - 220.181.108.186 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
2010-12-13 14:16:52 W3SVC473166833 203.191.148.15 GET /house.php rewrite=list-filter-all-city-37-sortid-1-H_rents-1500|2000-H_toward-2-H_owner_type-all-H_decoration-all-cid& 80 - 220.181.108.179 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
2010-12-13 14:16:53 W3SVC473166833 203.191.148.15 GET /house.php rewrite=list-filter-all-city-37-sortid-1-H_rents-1500|2000-H_toward-5-H_owner_type-all-H_decoration-2-cid& 80 - 220.181.108.172 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
2010-12-13 14:16:53 W3SVC473166833 203.191.148.15 GET /house.php rewrite=list-filter-all-city-37-sortid-1-H_rents-1500|2000-H_toward-4-H_owner_type-all-H_decoration-1-cid& 80 - 220.181.108.183 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
2010-12-13 14:16:53 W3SVC473166833 203.191.148.15 GET /house.php rewrite=list-filter-all-city-37-sortid-1-H_rents-1500|2000-H_toward-6-orderby-H_rents-ascdesc-desc-cid& 80 - 220.181.108.167 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
2010-12-13 14:16:54 W3SVC473166833 203.191.148.15 GET /house.php rewrite=list-filter-all-city-37-sortid-1-H_rents-1500|2000-orderby-H_area-ascdesc-desc-H_decoration-2-cid& 80 - 220.181.108.185 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
2010-12-13 14:16:54 W3SVC473166833 203.191.148.15 GET /house.php rewrite=list-filter-all-city-37-sortid-1-H_rents-1500|2000-orderby-H_area-ascdesc-desc-H_toward-4-cid& 80 - 220.181.108.171 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
2010-12-13 14:16:54 W3SVC473166833 203.191.148.15 GET /house.php rewrite=list-filter-all-city-37-sortid-1-H_rents-1500|2000-orderby-H_rents-ascdesc-desc-H_toward-3-cid& 80 - 220.181.108.183 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0


cecishi 发表于 2010-12-14 11:17:08 | 显示全部楼层
这是什么啦的啊。。看不懂
回复

使用道具 举报

疯子的疯子 发表于 2010-12-14 21:54:40 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报

 楼主| reless 发表于 2010-12-21 13:44:14 | 显示全部楼层
我晕,我有必要嘛,百度一直抓这个 house.php的页面,导致我带宽耗尽,我只能把house.php改名了,废掉房产频道
回复

使用道具 举报

snangone 发表于 2010-12-21 14:21:08 | 显示全部楼层
回复

使用道具 举报

wangbinyuyao 发表于 2011-1-27 21:22:40 | 显示全部楼层
我也是这样  同求解决方法
回复

使用道具 举报

yyyvvv 发表于 2011-1-30 21:11:37 | 显示全部楼层
(EM:166:)(EM:166:)(EM:166:)

希望官方重视!
回复

使用道具 举报

yiger123 发表于 2011-2-8 22:26:24 | 显示全部楼层
如果他这样一直抓,你的收录量不是惊人了?

新网虫 www.nnw001.com 我的房产就很好嘛,可是百度就是不来抓
回复

使用道具 举报

gzwolfs 发表于 2011-2-21 11:47:15 | 显示全部楼层
你可以在robots里屏蔽掉house.php啊
回复

使用道具 举报

湖中沉 发表于 2011-4-9 12:12:52 | 显示全部楼层
确实存在这个问题,重复页面导致的
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|小黑屋|Discuz! 官方站 ( 皖ICP备16010102号 )star

GMT+8, 2024-12-23 17:20 , Processed in 0.029004 second(s), 4 queries , Gzip On, Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2023, Tencent Cloud.

快速回复 返回顶部 返回列表