Discuz!官方免费开源建站系统

 找回密码
 立即注册
搜索

[疑问] 该怎样编写robots.txt

[复制链接]
dashu68 发表于 2009-6-18 09:12:04 | 显示全部楼层 |阅读模式
我的网站中
http://8844zz.com/index.php/viewnews-1752
http://8844zz.com/html/52/n-1752.html
的两个网址是同一个网页,
请问该怎样编写robots.txt
回复

使用道具 举报

Gnagno 发表于 2009-6-18 09:37:47 | 显示全部楼层
回复

使用道具 举报

littlehz 发表于 2009-6-18 11:33:56 | 显示全部楼层
按你的要求,可以禁止/html/的所有内容收录。但这样存在问题,如果你开了HTML静态化,/index.php/viewnews-1752会自动跳转到/html/52/n-1752.html,如果你禁止了收录/html/52/n-1752.html,那么/index.php/viewnews-1752也不会收录,因为这个/index.php/viewnews-1752已经做跳转了。

可以不写任何robots.txt,因为google机器人发现/html/52/n-1752.html这个页面,会收录,如果发现/index.php/viewnews-1752,因为你的SS开启了HTML静态,所以也会跳转到/html/52/n-1752.html这个页面,实际收录的是后者,不会收录/index.php/viewnews-1752
回复

使用道具 举报

leyan17 发表于 2009-6-20 00:50:07 | 显示全部楼层
回复

使用道具 举报

andy0901 发表于 2009-7-11 10:46:40 | 显示全部楼层
问一下,我的ss放在根目录下,也可以不放吗?
回复

使用道具 举报

antdk 发表于 2009-7-11 10:57:36 | 显示全部楼层
做个空文件放到根目录就可以了,设置可写入。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|小黑屋|Discuz! 官方站 ( 皖ICP备16010102号 )star

GMT+8, 2025-9-11 11:56 , Processed in 0.109298 second(s), 14 queries , Gzip On.

Powered by Discuz! X3.4

Copyright © 2001-2023, Tencent Cloud.

快速回复 返回顶部 返回列表