怎么样才能让我的论坛不会被百度这个网站收录！我不需要收录！

怎么样才能让我的论坛不会被百度这个网站收录！我不需要收录！

付钱给百度(笑)，你做的黄站或者反动论坛吧

关闭游客访问~

robots 设置即可

在技术层面，淘宝屏蔽百度的方法是，在网站的robots.txt文件中加上如下内容：

User-agent: Baiduspider
Disallow: /

　　但实际上这种方法并不能完全屏蔽百度的爬虫，至今在百度上输入site:taobao.com还是可以看到内容，要不要索引网站，还是由百度说了算，要是遵守robots协议，那才不会索引，因此要想完全屏蔽百度的爬虫，需要在.htaccess中加入一些语句才可以，下面介绍两种方法。

　　方法1：

RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^Baiduspider [NC]
RewriteRule .* - [F]

　　方法2：

SetEnvIfNoCase User-Agent "^Baiduspider" bad_bot

<Limit GET POST>
Order Allow,Deny
Allow from all
Deny from env=bad_bot
</Limit>

在技术层面，淘宝屏蔽百度的方法是，在网站的robots.txt文件中加上如下内容：

1. User-agent: Baiduspider
   
2. Disallow: /

复制代码

但实际上这种方法并不能完全屏蔽百度的爬虫，至今在百度上输入site:taobao.com还是可以看到内容，要不要索引网站，还是由百度说了算，要是遵守robots协议，那才不会索引，因此要想完全屏蔽百度的爬虫，需要在.htaccess中加入一些语句才可以，下面介绍两种方法。
　　方法1：

1. RewriteEngine on
   
2. RewriteCond %{HTTP_USER_AGENT} ^Baiduspider [NC]
   
3. RewriteRule .* - [F]

复制代码

方法2：

1. SetEnvIfNoCase User-Agent "^Baiduspider" bad_bot
   
2. <Limit GET POST>
   
3. Order Allow,Deny
   
4. Allow from all
   
5. Deny from env=bad_bot
   
6. </Limit>

复制代码

要想完全屏蔽百度的爬虫，需要在.htaccess中加入一些语句才可以，下面介绍两种方法。
　　方法1：

1. RewriteEngine on
   
2. RewriteCond %{HTTP_USER_AGENT} ^Baiduspider [NC]
   
3. RewriteRule .* - [F]

复制代码

方法2：

1. SetEnvIfNoCase User-Agent "^Baiduspider" bad_bot
   
2. <Limit GET POST>
   
3. Order Allow,Deny
   
4. Allow from all
   
5. Deny from env=bad_bot
   
6. </Limit>

复制代码

{:soso_e179:} 长知识了

感觉很不错，也更有动态感了

robots.txt屏蔽百度即可  学淘宝吧