Discuz!官方免费开源建站系统

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索

[已答复] 采集的时候:漏采

[复制链接]
Gnagno 发表于 2009-6-2 09:24:47 | 显示全部楼层 |阅读模式
本帖最后由 lidq.jingwu 于 2009-6-2 09:33 编辑

怎么办?

经常第一次采不到,下次才可以
lidq.jingwu 发表于 2009-6-2 09:32:41 | 显示全部楼层
个别文章采集失败,引起的跳过,主要原因有二。
一是由于php无法读取对方网站导致的。
二是php在从对方服务器上取得图片,并保存在本地处理时间过长也有关系,再者有些事,内容已经读取,但图片读取不过来(到读取图片的时候网络突然比较繁忙,导致图片打不开)。

这块不是程序做造成的,产生原因:
1、网络繁忙导致php执行超时
2、目标内容(包括:网址、图片)未响应,404错误或其它错误。
   产生这种原因多种,网络堵塞、防盗机制、自己服务器这样或那样突然一下繁忙等

解决方法:
在所有采集过后,可以再执行一次采集,这样采过的内容会跳过,由于网络繁忙导致失败的内容会重新采回来。

评分

1

查看全部评分

回复

使用道具 举报

 楼主| Gnagno 发表于 2009-6-2 15:07:44 | 显示全部楼层
个别文章采集失败,引起的跳过,主要原因有二。
一是由于php无法读取对方网站导致的。
二是php在从对方服务器上取得图片,并保存在本地处理时间过长也有关系,再者有些事,内容已经读取,但图片读取不过来(到读取 ...
lidq.jingwu 发表于 2009-6-2 09:32

谢谢GG
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|小黑屋|Discuz! 官方站 ( 皖ICP备16010102号 )star

GMT+8, 2024-12-26 11:10 , Processed in 0.042465 second(s), 5 queries , Gzip On, Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2023, Tencent Cloud.

快速回复 返回顶部 返回列表