全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

IP归属甄别会员请立即修改密码
查看: 1457|回复: 12
打印 上一主题 下一主题

dz论坛屏蔽了百度,貌似现在出现了很多采集DZ论坛的网站

[复制链接]
跳转到指定楼层
1#
发表于 2011-4-22 13:12:27 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
从4月9号,DZ论坛开始屏蔽百度了。
2#
发表于 2011-4-22 13:15:20 | 只看该作者
#
# robots.txt for Discuz! X2
#

User-agent: *
Disallow: /api/
Disallow: /data/
Disallow: /source/
Disallow: /install/
Disallow: /template/
Disallow: /config/
Disallow: /uc_client/
Disallow: /uc_server/
Disallow: /static/
Disallow: /admin.php
Disallow: /search.php
Disallow: /member.php
Disallow: /api.php
Disallow: /misc.php
Disallow: /connect.php
Disallow: /forum.php?mod=redirect*
Disallow: /forum.php?mod=post*
Disallow: /home.php?mod=spacecp*
Disallow: /userapp.php?mod=app&*
Disallow: /*?mod=misc*
Disallow: /*?mod=attachment*
Disallow: /*mobile=yes*
3#
 楼主| 发表于 2011-4-22 13:16:11 | 只看该作者
从那里看不出来。但是你看百度快照,还是停在4月9号
而且新贴,也都没收录。
4#
发表于 2011-4-22 13:16:23 | 只看该作者
它舍得屏蔽吗?
5#
发表于 2011-4-22 13:19:51 | 只看该作者
没啥舍不得,俺老早就屏蔽了BD,然后是SS...目前比较文明点的就是GG....考虑把SG也屏蔽掉
6#
发表于 2011-4-22 13:22:07 | 只看该作者
都屏蔽了就好了
7#
发表于 2011-4-22 13:23:40 | 只看该作者
sogou必须得屏蔽的
8#
发表于 2011-4-22 13:34:43 | 只看该作者
如何采集DZ论坛?
9#
发表于 2011-4-22 13:44:01 | 只看该作者
如何踩?用脚踩呗,,,呵呵

找几个脚本踩呗
10#
发表于 2011-4-22 13:46:38 | 只看该作者
原帖由 wjhhxl 于 2011-4-22 13:16 发表
从那里看不出来。但是你看百度快照,还是停在4月9号
而且新贴,也都没收录。

难说是百度屏蔽DZ
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2026-1-14 23:25 , Processed in 0.064351 second(s), 10 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表