Discuz!官方免费开源建站系统

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索

[不是BUG] 谷歌http抓取错误 急急急

[复制链接]
saranghieyao 发表于 2009-6-11 21:15:26 | 显示全部楼层 |阅读模式


请问这是哪里设置出错了,,,。?????????
lidq.jingwu 发表于 2009-6-12 09:20:26 | 显示全部楼层
关于这个错误有很多原因,下面是介绍。
4xx错误

有关这些状态码的完整列表,请参阅RFC 2616。造成这种错误的原因可能是网络服务器无法辨认或处理此申请时被禁止,或此申请超时。如果此网页已迁移且对该网页的申请返回状态代码410,您可以考虑更改回应,以返回状态代码301,并永久重定向此申请。

未找到域名

可能未正确解析DNS。我们可以与DNS服务器通讯,但无法找到域名。

无法解析HTTP响应

尝试访问您的网页时,我们无法解析从网络服务器收到的回应。

IP在排除范围中

此IP地址属于专用地址区,已保留用于局域网(如,127.0.0.1)。

什么是"网址超时"错误?

Google在访问网页时收到了超时通知,请确保网页可以访问。错误类型:

DNS 查找超时

网址超时

我们在连接至您的网络服务器时或在请求期间收到了超时通知。

robots.txt 超时

服务器在Google访问robots.txt文件时超时。在抓取您网站的网页之前,Google会检查您的 robots.txt文件,以确保Google没有抓取您不希望抓取的网页。不过,Google在访问robots.txt文件时收到了超时通知。为了确保Google不会抓取该文件中的任何网页,Google推迟了抓取。在这种情况下,Google会在以后重返您的网站,并在可以访问robots.txt文件后进行抓取。请注意,这不同于查找 robots.txt时的404错误回应。如果我们收到404错误回应,就会认为robots.txt文件不存在并继续抓取。

你可以在网上查找相关资料,在robots.txt 中设置,使google不抓取错误页面。
回复

使用道具 举报

microsoul 发表于 2009-6-16 15:34:25 | 显示全部楼层
我的网站http://hi.microsoul.com也有这情形,也不知如何解决。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|小黑屋|Discuz! 官方站 ( 皖ICP备16010102号 )star

GMT+8, 2024-11-15 17:57 , Processed in 0.027365 second(s), 5 queries , Gzip On, Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2023, Tencent Cloud.

快速回复 返回顶部 返回列表