Discuz!官方免费开源建站系统

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索

[采集] UTF-8采集中文页面出错

[复制链接]
平安数据 发表于 2009-5-18 10:18:00 | 显示全部楼层 |阅读模式
本帖最后由 平安数据 于 2009-5-18 14:44 编辑

我的SS 7.0为utf-8,采集中文页面出错,在采集配置中已经填写了网页的字符编码。现象如下图(附件中1是设置,2是采集过程中,3是采集完成后。)
PS:以前用的ss 6.0虽然测试的时候也显示乱码,但最后采集的时候,是没有问题的。
紫琼 发表于 2009-5-18 10:26:03 | 显示全部楼层
把你的采集器导出我抽空在本地试试~
回复

使用道具 举报

 楼主| 平安数据 发表于 2009-5-18 12:28:52 | 显示全部楼层
我看了其他一些帖子,本地测试应该是没问题的。可能是程序对服务器有什么要求,但具体要求是什么?不知道怎么更改?采集器如下,请紫琼版主测一下

# SupeSite Dump
# Version: SupeSite 7.0
# Time: 2009-05-18 12:26:18
# From: 找妖精 (http://news.zyj.com)
#
# This file was BASE64 encoded
#
# SupeSite: http://www.supesite.com
# Please visit our website for latest news about SupeSite
# --------------------------------------------------------


YTo1MTp7czo3OiJyb2JvdGlkIjtzOjE6IjIiO3M6NDoibmFtZS
I7czozMToi6IW+6K6v5aix5LmQ5rua5Yqo5paw6Ze7LeWoseS5
kCI7czozOiJ1aWQiO3M6MToiMiI7czo4OiJkYXRlbGluZSI7cz
oxMDoiMTI0MjU2Mzg5NSI7czo4OiJsYXN0dGltZSI7czoxMDoi
MTI0MjU2MzkwMyI7czoxMToiaW1wb3J0Y2F0aWQiO3M6MToiMy
I7czo4OiJyb2JvdG51bSI7czoxOiI4IjtzOjExOiJsaXN0dXJs
dHlwZSI7czozOiJuZXciO3M6NzoibGlzdHVybCI7czo4ODoiYT
oyOntzOjY6Im1hbnVhbCI7YToxOntpOjA7czozMzoiaHR0cDov
L2VudC5xcS5jb20vM2p5bS9zY3JvbGwuaHRtIjt9czo0OiJhdX
RvIjtzOjA6IiI7fSI7czoxMzoibGlzdHBhZ2VzdGFydCI7czox
OiIwIjtzOjExOiJsaXN0cGFnZWVuZCI7czoxOiIwIjtzOjEyOi
JyZXZlcnNlb3JkZXIiO3M6MToiMCI7czo2OiJhbGxudW0iO3M6
MzoiMTAwIjtzOjY6InBlcm51bSI7czoxOiIyIjtzOjc6InNhdm
VwaWMiO3M6MToiMCI7czo2OiJlbmNvZGUiO3M6NjoiR0IyMzEy
IjtzOjEzOiJwaWN1cmxsaW5rcHJlIjtzOjA6IiI7czo5OiJzYX
ZlZmxhc2giO3M6MToiMCI7czoxNDoic3ViamVjdHVybHJ1bGUi
O3M6MTMyOiI8dGQgYWxpZ249ImxlZnQiIGNsYXNzPSJibGEiIH
N0eWxlPSJwYWRkaW5nLXRvcDoxMHB4OyI+PHRhYmxlIHdpZHRo
PSIxMDAlIiBib3JkZXI9IjAiIGNlbGxzcGFjaW5nPSIwIiBjZW
xscGFkZGluZz0iMCI+W2xpc3RdPC90YWJsZT4iO3M6MTg6InN1
YmplY3R1cmxsaW5rcnVsZSI7czozMjoiPGEgdGFyZ2V0PSJfYm
xhbmsiIGhyZWY9Ilt1cmxdIj4iO3M6MTc6InN1YmplY3R1cmxs
aW5rcHJlIjtzOjE3OiJodHRwOi8vZW50LnFxLmNvbSI7czoxMT
oic3ViamVjdHJ1bGUiO3M6MzY6IjxkaXYgaWQ9IkFydGljbGVU
aXQiPltzdWJqZWN0XTwvZGl2PiI7czoxMzoic3ViamVjdGZpbH
RlciI7czowOiIiO3M6MTQ6InN1YmplY3RyZXBsYWNlIjtzOjA6
IiI7czoxNjoic3ViamVjdHJlcGxhY2V0byI7czowOiIiO3M6MT
A6InN1YmplY3RrZXkiO3M6MDoiIjtzOjE4OiJzdWJqZWN0YWxs
b3dyZXBlYXQiO3M6MToiMCI7czoxMjoiZGF0ZWxpbmVydWxlIj
tzOjA6IiI7czo4OiJmcm9tcnVsZSI7czoyOiJxcSI7czoxMDoi
YXV0aG9ycnVsZSI7czozOiJ6eWoiO3M6MTE6Im1lc3NhZ2VydW
xlIjtzOjUwOiI8ZGl2IGlkPSJBcnRpY2xlQ250Ij5bbWVzc2Fn
ZV08ZGl2IGlkPSJBcHBlbmRUb1FRIiI7czoxMzoibWVzc2FnZW
ZpbHRlciI7czo1MzQ6IjxvcHRpb24gdmFsdWU9IjYiIHNlbGVj
dGVkPSJzZWxlY3RlZCI+Kjwvb3B0aW9uPnxzcmM9Imh0dHA6Ly
9pbWcxLnFxLmNvbS9uZXdzL3BpY3MvOTQyMy85NDIzMjE2Lmdp
ZiJ8c3JjPSJodHRwOi8vaW1nMS5xcS5jb20vbmV3cy9waWNzLz
k0MjMvOTQyMzA3Ny5naWYifHNyYz0iaHR0cDovL2ltZzEucXEu
Y29tL25ld3MvcGljcy85NDIzLzk0MjMwNzkuZ2lmInxzcmM9Im
h0dHA6Ly9pbWcxLnFxLmNvbS9uZXdzL3BpY3MvOTQyMy85NDIz
NTE3LmdpZiJ8c3JjPSJodHRwOi8vaW1nMS5xcS5jb20vbmV3cy
9waWNzLzk0MjMvOTQyMzIxOC5naWYifHNyYz0iaHR0cDovL21h
dDEucXEuY29tL2VudC9kYXRhbGliL3N0YXIuZ2lmInxzcmM9Im
h0dHA6Ly9tYXQxLnFxLmNvbS9lbnQvZGF0YWxpYi9hbGJ1bS9h
bGJ1bWNkLmdpZiJ8c3JjPSJodHRwOi8vaW1nMS5xcS5jb20vbm
V3cy9waWNzLzk0MjMvOTQyMzA4Ny5naWYifDxQIGFsaWduPXJp
Z2h0PjxGT05UIGNvbG9yPSM2NjY2NjY+KjwvRk9OVD48L1A+fD
whLS1saW5rLS0+KjwhLS0vbGluay0tPiI7czoxNToibWVzc2Fn
ZXBhZ2V0eXBlIjtzOjQ6InBhZ2UiO3M6MTU6Im1lc3NhZ2VwYW
dlcnVsZSI7czowOiIiO3M6MTg6Im1lc3NhZ2VwYWdldXJscnVs
ZSI7czowOiIiO3M6MjE6Im1lc3NhZ2VwYWdldXJsbGlua3ByZS
I7czowOiIiO3M6MTQ6Im1lc3NhZ2VyZXBsYWNlIjtzOjA6IiI7
czoxNjoibWVzc2FnZXJlcGxhY2V0byI7czowOiIiO3M6ODoiYX
V0b3R5cGUiO3M6MToiMSI7czoxMToid2lsZGNhcmRsZW4iO3M6
MToiMCI7czoyMDoic3ViamVjdHVybGxpbmtjYW5jZWwiO3M6MD
oiIjtzOjIwOiJzdWJqZWN0dXJsbGlua2ZpbHRlciI7czowOiIi
O3M6MTY6InN1YmplY3R1cmxsaW5rcGYiO3M6MDoiIjtzOjE2Oi
JzdWJqZWN0a2V5Y2FuY2VsIjtzOjA6IiI7czoxMDoibWVzc2Fn
ZWtleSI7czowOiIiO3M6MTY6Im1lc3NhZ2VrZXljYW5jZWwiO3
M6MDoiIjtzOjEzOiJtZXNzYWdlZm9ybWF0IjtzOjE6IjEiO3M6
MjA6Im1lc3NhZ2VwYWdldXJsbGlua3BmIjtzOjA6IiI7czo3Oi
J1aWRydWxlIjtzOjA6IiI7czoxNToiZGVmYXVsdGRhdGVsaW5l
IjtzOjE6IjAiO3M6NzoidmVyc2lvbiI7czozOiI3LjAiO30=
回复

使用道具 举报

紫琼 发表于 2009-5-18 14:10:59 | 显示全部楼层
我这里导入根本采集不到什么,没有乱码,但是测试采集标题什么的都是“没识别出任何内容,请检查识别规则”,建议你检查一遍配置是不是不太对,因为配置采集器比较费时间,没法帮你配置了,请谅解~
回复

使用道具 举报

 楼主| 平安数据 发表于 2009-5-18 14:32:03 | 显示全部楼层
上边那个采集器,有的标题是采集不到的,能采集到的都是乱码。
下边的这个采集器,都可以采集,全都是乱码:
# SupeSite Dump
# Version: SupeSite 7.0
# Time: 2009-05-18 14:27:33
# From: 找妖精 (http://news.zyj.com)
#
# This file was BASE64 encoded
#
# SupeSite: http://www.supesite.com
# Please visit our website for latest news about SupeSite
# --------------------------------------------------------


YTo1MTp7czo3OiJyb2JvdGlkIjtzOjE6IjEiO3M6NDoibmFtZS
I7czozMToi5pCc54uQ57u85ZCI5rua5Yqo5paw6Ze7LeaXtuS6
iyI7czozOiJ1aWQiO3M6MToiMiI7czo4OiJkYXRlbGluZSI7cz
oxMDoiMTI0MjE5Njc4NiI7czo4OiJsYXN0dGltZSI7czoxMDoi
MTI0MjYyNzc0OSI7czoxMToiaW1wb3J0Y2F0aWQiO3M6MToiNC
I7czo4OiJyb2JvdG51bSI7czoxOiI4IjtzOjExOiJsaXN0dXJs
dHlwZSI7czozOiJuZXciO3M6NzoibGlzdHVybCI7czoxMDg6Im
E6Mjp7czo2OiJtYW51YWwiO2E6MTp7aTowO3M6NTM6Imh0dHA6
Ly9uZXdzLnNvaHUuY29tLzEvMDUwNC82NS9zdWJqZWN0MjIwMD
c2NTcyLnNodG1sIjt9czo0OiJhdXRvIjtzOjA6IiI7fSI7czox
MzoibGlzdHBhZ2VzdGFydCI7czoxOiIwIjtzOjExOiJsaXN0cG
FnZWVuZCI7czoxOiIwIjtzOjEyOiJyZXZlcnNlb3JkZXIiO3M6
MToiMCI7czo2OiJhbGxudW0iO3M6MzoiMTAwIjtzOjY6InBlcm
51bSI7czoxOiIxIjtzOjc6InNhdmVwaWMiO3M6MToiMCI7czo2
OiJlbmNvZGUiO3M6MzoiZ2JrIjtzOjEzOiJwaWN1cmxsaW5rcH
JlIjtzOjA6IiI7czo5OiJzYXZlZmxhc2giO3M6MToiMCI7czox
NDoic3ViamVjdHVybHJ1bGUiO3M6MzE6Ijx0ZCBjbGFzcz1uZX
dzYmx1ZTE+W2xpc3RdPC90ZD4iO3M6MTg6InN1YmplY3R1cmxs
aW5rcnVsZSI7czoyODoiPGEgaHJlZj1bdXJsXSB0YXJnZXQ9X2
JsYW5rPiI7czoxNzoic3ViamVjdHVybGxpbmtwcmUiO3M6MDoi
IjtzOjExOiJzdWJqZWN0cnVsZSI7czoxODoiPGgxPltzdWJqZW
N0XTwvaDE+IjtzOjEzOiJzdWJqZWN0ZmlsdGVyIjtzOjA6IiI7
czoxNDoic3ViamVjdHJlcGxhY2UiO3M6MDoiIjtzOjE2OiJzdW
JqZWN0cmVwbGFjZXRvIjtzOjA6IiI7czoxMDoic3ViamVjdGtl
eSI7czowOiIiO3M6MTg6InN1YmplY3RhbGxvd3JlcGVhdCI7cz
oxOiIwIjtzOjEyOiJkYXRlbGluZXJ1bGUiO3M6MDoiIjtzOjg6
ImZyb21ydWxlIjtzOjEyOiLmkJzni5DmlrDpl7siO3M6MTA6Im
F1dGhvcnJ1bGUiO3M6OToi54Wn5aaW6ZWcIjtzOjExOiJtZXNz
YWdlcnVsZSI7czo3MzoiPGRpdiBpZD0ic29odV9jb250ZW50Ii
BjbGFzcz0iYXJ0aWNsZSI+W21lc3NhZ2VdPGRpdiBjbGFzcz0i
bmV3c0NvbW1lbnQiPiI7czoxMzoibWVzc2FnZWZpbHRlciI7cz
ozNToiPGlmcmFtZSo8L2lmcmFtZT58PHNjcmlwdCo8L3Njcmlw
dD4iO3M6MTU6Im1lc3NhZ2VwYWdldHlwZSI7czo0OiJwYWdlIj
tzOjE1OiJtZXNzYWdlcGFnZXJ1bGUiO3M6MDoiIjtzOjE4OiJt
ZXNzYWdlcGFnZXVybHJ1bGUiO3M6MDoiIjtzOjIxOiJtZXNzYW
dlcGFnZXVybGxpbmtwcmUiO3M6MDoiIjtzOjE0OiJtZXNzYWdl
cmVwbGFjZSI7czowOiIiO3M6MTY6Im1lc3NhZ2VyZXBsYWNldG
8iO3M6MDoiIjtzOjg6ImF1dG90eXBlIjtzOjE6IjEiO3M6MTE6
IndpbGRjYXJkbGVuIjtzOjE6IjAiO3M6MjA6InN1YmplY3R1cm
xsaW5rY2FuY2VsIjtzOjA6IiI7czoyMDoic3ViamVjdHVybGxp
bmtmaWx0ZXIiO3M6MDoiIjtzOjE2OiJzdWJqZWN0dXJsbGlua3
BmIjtzOjA6IiI7czoxNjoic3ViamVjdGtleWNhbmNlbCI7czow
OiIiO3M6MTA6Im1lc3NhZ2VrZXkiO3M6MDoiIjtzOjE2OiJtZX
NzYWdla2V5Y2FuY2VsIjtzOjA6IiI7czoxMzoibWVzc2FnZWZv
cm1hdCI7czoxOiIxIjtzOjIwOiJtZXNzYWdlcGFnZXVybGxpbm
twZiI7czowOiIiO3M6NzoidWlkcnVsZSI7czowOiIiO3M6MTU6
ImRlZmF1bHRkYXRlbGluZSI7czoxOiIwIjtzOjc6InZlcnNpb2
4iO3M6MzoiNy4wIjt9
回复

使用道具 举报

紫琼 发表于 2009-5-18 14:37:54 | 显示全部楼层
5# 平安数据
这个没有任何问题哦,看截图:

回复

使用道具 举报

 楼主| 平安数据 发表于 2009-5-18 14:42:27 | 显示全部楼层
是的,所以SS7.0的程序是不是对服务器有什么特殊要求?为什么我的采集就不行呢,ss6.0的就可以正常采集,不知道问题出在什么地方,郁闷啊。

我的服务器配置如下:
    * 操作系统: Linux / PHP v4.4.9
    * 数据库版本: 5.0.67.d7-ourdelta-log
    * 上传许可: 2M
    * 数据库尺寸: 2.55 MB
    * 附件尺寸: ------
    * 当前程序版本: SupeSite 7.0 ( 20090422 )
    * UCenter 程序版本: UCenter 1.5.0 Release 20090121
回复

使用道具 举报

紫琼 发表于 2009-5-18 14:49:18 | 显示全部楼层
看环境没什么问题啊,你的 程序 和 数据库 编码都是 utf8 吗?不会是程序 utf8 数据库 gbk 吧~
回复

使用道具 举报

 楼主| 平安数据 发表于 2009-5-18 15:05:17 | 显示全部楼层
看环境没什么问题啊,你的 程序 和 数据库 编码都是 utf8 吗?不会是程序 utf8 数据库 gbk 吧~
紫琼 发表于 2009-5-18 14:49


都是UTF8的
$_SC['dbcharset'] = 'utf8';
$_SC['charset'] = 'utf-8';
回复

使用道具 举报

紫琼 发表于 2009-5-18 15:53:40 | 显示全部楼层
9# 平安数据
那也许真是环境问题,不过目前还真没遇到过由于环境问题导致采集结果不同的问题,不行就换空间吧~
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|小黑屋|Discuz! 官方站 ( 皖ICP备16010102号 )star

GMT+8, 2024-11-15 23:04 , Processed in 0.044605 second(s), 3 queries , Gzip On, Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2023, Tencent Cloud.

快速回复 返回顶部 返回列表