Discuz!官方免费开源建站系统

 找回密码
 立即注册
搜索

需要人帮忙解答此问题 robots.txt 403(禁止)

[复制链接]
howard2639 发表于 2012-4-14 16:25:00 | 显示全部楼层 |阅读模式
目前论坛遇到一个大问题就是至从更新了版本后
论坛在各大搜寻引擎上却找不到了~~
以前的旧网页网址仍可搜寻的到
但却都没有一个页面网址是由新页面而来
而在Google 和Bing 的网站管理工具
在于robots.txt 文件指定搜索引擎抓取您的网站内容的方式
目前都是呈现 403(禁止) 这个状态
是不是要改robots.txt中内容呢?

论坛进入是很正常的~但是搜寻引擎都是呈现这种状况
抓取不到!

还是这个问题不是robots的关系呢?
请各位帮忙小的解答~~感谢再感谢!

给一下目前论坛的robots.txt为

#
# robots.txt for Discuz! X2
#

User-agent: YahooYSMcm
Disallow: /api/
Disallow: /data/
Disallow: /source/
Disallow: /install/
Disallow: /template/
Disallow: /config/
Disallow: /uc_client/
Disallow: /uc_server/
Disallow: /static/
Disallow: /admin.php
# Disallow: /search.php
Disallow: /member.php
Disallow: /api.php
Disallow: /misc.php
Disallow: /connect.php
Disallow: /forum.php?mod=redirect*
Disallow: /forum.php?mod=post*
Disallow: /home.php?mod=spacecp*
Disallow: /userapp.php?mod=app&*
Disallow: /*?mod=misc*
Disallow: /*?mod=attachment*
# Disallow: /*mobile=yes*


回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|小黑屋|Discuz! 官方站 ( 皖ICP备16010102号 )star

GMT+8, 2025-8-30 19:00 , Processed in 0.111268 second(s), 15 queries , Gzip On.

Powered by Discuz! X3.4

Copyright © 2001-2023, Tencent Cloud.

快速回复 返回顶部 返回列表