搜索引擎爬虫管理插件(RobotsMng)v1.0

石头 发布于2010-3-25 17:54:22 分类: 模板插件 已浏览1725 网友评论22条 我要评论

    搜索引擎爬虫管理插件(RobotsMng)是一款可以帮助新手管理你的Robots.txt文件的插件,如果你还不知道什么是Robots.txt请百度一下先。写这个插件的初衷在于帮助不懂Robots.txt写作规范和语法的同学们,通过这个插件,你只需要点点鼠标就能规范的生成Robts.txt文件,帮助引擎收录你想要它收录的东西,过滤你不想它收录的东西。

    此插件并不会造成系统变慢,也不存在可以利用的漏洞,请大家放心下载使用。下面是部分插件的使用说明:

    1、我该如何管理此插件?

    在你已经安装了此插件后,你可以通过后台左右的网站设置管理中的管理引擎爬虫进入管理页,你也可以通过插件管理中的Robots Manager后的管理进入管理页。

    2、ZBLOG的哪些文件是应该拦截的?

    不允许搜索引擎抓取的文件应该就是你不希望被收录的文件,在ZBLOG上,你可以拦截以下文件

/ADMIN/

/SCRIPT/

/DATA/

/FUNCTION/

/PLUGIN/

/login.asp

    3、操作说明

    全部允许:表示允许任何搜索引擎爬虫抓取你网站的任何内容;

    全部拦截:表示不允许任何搜索引擎爬虫抓取你网站上的任何内容(慎用);

    在Robots.txt中显示网站地图:这能更方便爬虫读取网站地址并抓取,所以此项是不允许更改的;

    自定义抓取规则:定义此规则需要第一步中选择为全部允许。如果你想禁止所有引擎爬虫抓取你网站的IMAGES目录,你可以在操作中选择“拦截”,爬虫选择“所有引擎机器人”,在文件中输入“/IMAGES/”就可以了;如果你想禁止多个目录你可以用“||”分割,比如“/ADMIN/||/SCRIPT/||/FUNCTION/”这样会生成三条记录。

    点此下载此插件

已经有(22)位网友发表了评论,你也评一评吧!

原创文章转载请注明引自石头博客 http://www.stou.info/ 欢迎订阅石头博客

猜你也喜欢

  1. 发表于2010-11-19 15:37:45

    过来学习学习。

  2. 发表于2010-03-29 14:55:40

    路过!插件不错用了!多谢

    liukuang 于 2010-4-1 8:58:07 回复
    这个插件我怎么知道他有没有作用啊?有人知道吗?
    石头 于 2010-4-1 10:17:05 回复
    用了这个插件后,在后台中你可以通过它生成robots.txt

  3. 发表于2010-03-29 11:41:50

    这个东西很不错,石头很细心呢。Smile

  4. 发表于2010-03-27 19:08:27

    自己手动写就好。不要加大博客的处理压力!

    stone 于 2010-3-28 1:34:22 回复
    如果熟悉当然自己写最好了。不过有需求就有产品,这个插件也是主要帮助新手的啦

  5. 发表于2010-03-27 18:04:53

    这是ZB插件?WP没有么?

    stone 于 2010-3-28 1:37:42 回复
    恩,是Z-Blog的。WP有没有就不清楚了。不过我想应该没有吧。

  6. 发表于2010-03-27 17:50:27

    很强大哦,PJ就没有这样的插件!

    stone 于 2010-3-28 1:43:27 回复
    呵呵,过奖了。对于PJ,我昨天还特意来安装了一下,挺人性化的。不过它的插件机制不怎么熟悉,不知道是否不错。

  7. 发表于2010-03-27 14:14:12

    我是来点广告的~因为换了ip

    stone 于 2010-3-28 1:43:54 回复
    嘿嘿,疯狂的顶你!

  8. 发表于2010-03-27 11:36:46

    知道规则,自己写写就好了。

    stone 于 2010-3-28 1:51:47 回复
    知道规则的会写,不会的就要靠插件嘛。呵呵

  9. 发表于2010-03-26 23:10:54

    冒似我来过这里

    stone 于 2010-3-28 1:40:50 回复
    第一次不来不是你的错,第二次不是就是我的错

  10. 发表于2010-03-26 19:51:10

    果然是搞网站的人!

    stone 于 2010-3-28 1:39:13 回复
    是么?这你都看出来了。。。。

  11. 发表于2010-03-26 18:04:30

    我在博客里早已经设置了Robot.txt文件,但是没有限制那么多,呵呵……
    今天很忙,所以没抢到沙发,诶,失败...

    stone 于 2010-3-28 1:38:34 回复
    该来占沙发了,发贴了!

  12. 发表于2010-03-26 17:13:52

    很方便,可以随时管理那些能被蜘蛛找到 ,那些不能。

    stone 于 2010-3-28 1:36:20 回复
    这就是robots.txt的作用之处。希望能给大家一些帮助吧,不过以目前的统计来看,插件并不受欢迎,冏。

  13. 发表于2010-03-26 14:29:39

    这个插件很实用啊

    stone 于 2010-3-26 14:56:58 回复
    嘿嘿,常来哈!

  14. 发表于2010-03-26 12:58:20

    需要这个插件

  15. 发表于2010-03-26 12:46:30

    呵呵,还是用txt改一个别人的方便~

    stone 于 2010-3-26 12:52:14 回复
    这个更方便呢。

  16. 发表于2010-03-26 11:09:22

    这个真不错!!!!

  17. 发表于2010-03-26 08:14:26

    还真蛮方便的~~

    stone 于 2010-3-26 13:49:15 回复
    嘿嘿

  18. 发表于2010-03-26 00:30:48

    我是过来点广告的

    stone 于 2010-3-26 9:27:51 回复
    常来哈!

  19. 发表于2010-03-25 23:53:30

    就是一个插件可以修改Robots.txt文本文件把?

    stone 于 2010-3-26 9:34:19 回复
    根本上来说是的

  20. 发表于2010-03-25 18:15:54

    支持一下~~

    stone 于 2010-3-26 9:35:41 回复
    嘿嘿,感谢支持哈。有你的支持我才有动力哈

  21. 发表于2010-03-25 18:10:31

    抢沙发抢沙发

    爱好者博客 于 2010-3-25 18:22:03 回复
    哥,你慢啦,不过抢不抢沙发没事,关键问题是抢到沙发插件还是一样的。
    loker 于 2010-3-25 23:27:14 回复
    呵呵,都怪手一激动输错网址了,然后又改了一次。
    stone 于 2010-3-26 9:28:57 回复
    不要激动,沙发有的是。呵呵

  22. 发表于2010-03-25 18:10:28

    好东西哦,我怎么没想到呢,明天还跟我说了呢。

    stone 于 2010-3-26 9:28:23 回复
    Haha我就说你们猜不到吧?
    飞猪 于 2010-3-26 21:30:41 回复
    之前看到过但没用过
    爱好者博客 于 2010-3-27 11:24:05 回复
    之前看到过?难道有比这个更先进的东西?
    爱好者博客 于 2010-3-27 11:24:58 回复
    之前看到过?难道有比这个更先进的东西?
    stone 于 2010-3-28 1:35:07 回复
    周哥又在夸奖了,呵呵

称呼:

邮件:

网站:

验证:

记住我的信息,下次不用再输入小诀窍:按ctrl+y键可以启动搜狗云输入法