大家看看这个robots文件有没有问题。

老虎吧 · 发表于 2011-5-3 21:14:53

本帖最后由老虎吧于 2011-5-3 21:16 编辑

红色那条好像不起作用。还是被收录。

#
#robots.txtforDiscuz!X1.5
#
User-agent: *
Disallow: /api/
Disallow: /data/
Disallow: /source/
Disallow: /install/
Disallow: /template/
Disallow: /config/
Disallow: /uc_client/
Disallow: /uc_server/
Disallow: /static/
Disallow: /admin.php
Disallow: /search.php
Disallow: /member.php
Disallow: /portal.php
Disallow: /forum.php
Disallow: /index.php
Disallow: /api.php
Disallow: /misc.php
Disallow: /forum.php?mod=redirect*
Disallow: /forum.php?mod=post*
Disallow: /home-space-do-thread.html
Disallow: /home-*
Disallow: /home.php
Disallow: /home.php?mod=spacecp*
Disallow: /home.php?mod=space&do=thread
Disallow: /home-space-uid-*
Disallow: /home-space-uid-2775-do-home-view-me-from-space.html
Disallow: /userapp.php?mod=app&*
Disallow: /*?mod=misc*
Disallow: /*?mod=attachment*
Disallow: /member-*
Disallow: /forum-redirect-*
Disallow: /forum-post-*
Disallow: /home-spacecp-*
Disallow: /userapp-app-*
Disallow: /*-misc-*
Disallow: /*-attachment-*
Disallow: /*?*
Disallow: /*&*
Disallow: /*%*
Allow: /.html$
Disallow: /forum.php?mod=forumdisplay&fid=*
Disallow: /forum-forumdisplay-fid-47-filter-*
Disallow: /forum-forumdisplay-fid-47-filter-lastpost-orderby-lastpost.html
Disallow: /forum-forumdisplay-fid-47-filter-author-orderby-dateline-dateline-7948800.html
Disallow: /group.php?mod=my
Disallow: /userapp.php
Disallow: /userapp.php?mod=app&*

zdfjr · 发表于 2011-9-23 16:17:28

我把硬币抛向空中：如果正面朝上，就上msn，如果背面朝上，就上qq，如果硬币立起来，我就去自习。

downup · 发表于 2011-9-25 11:08:08

一直在学习

宝塔脚下打倩倩 · 发表于 2011-9-25 13:31:00

支持一下！！

seo学子网 · 发表于 2011-9-25 14:19:49

这个了解皮毛

zuiaiyin · 发表于 2011-9-25 16:47:38

学习中~！

依龙静 · 发表于 2011-9-27 07:25:04

极致的东西可真多啊

taskone · 发表于 2011-9-28 19:11:29

有一定关系吧

taskone · 发表于 2011-10-2 21:40:11

这是神马情况啊。

81336388 · 发表于 2011-10-3 14:11:47

你淡定吗？哈哈啊 http://www.c9c9gua.com

		自动登录	找回密码
密码			立即注册