txfzq 发表于 2010 年 12 月 20 日 08:52:49

大家的wordpress的robots.txt都如何设置啊

请教大家都是怎么设置的，对收录的影响大不大？在网上搜了一堆，各说各的理，拿不定主意了，想看看大家的使用效果

天灰灰 发表于 2010 年 12 月 20 日 09:31:47

默认的好~~~~

sctra 发表于 2010 年 12 月 20 日 09:32:52

看几个seo高手的blog的设置

txfzq 发表于 2010 年 12 月 20 日 09:36:26

默认的只是加了一个GG地图哦

381183401 发表于 2010 年 12 月 20 日 10:37:49

浮.云罢了   设置干嘛？

txfzq 发表于 2010 年 12 月 20 日 13:56:00

顶上去，接着请教哈

yiyi 发表于 2010 年 12 月 20 日 14:40:17

俺是这样设置的，其实不设置也行！

User-agent: *

Disallow: /wp-

Allow: /wp-content/uploads/

Disallow: /?

Disallow: /feed

Disallow: /*/*/feed

Disallow: /trackback

Disallow: /*/*/trackback

Disallow: /index.php?

Disallow: /index.php/

Disallow: /*.php$

Disallow: /*.css$

Disallow: /*.html

Disallow: /date/

Disallow: /page/

Disallow: /comments


Sitemap: http://gongyiyi.com/sitemap.xml

Sitemap: http://gongyiyi.com/sitemap.xml.gz

055555 发表于 2010 年 12 月 20 日 14:51:36

我的一个Disallow也没有。{:3_47:}

txfzq 发表于 2010 年 12 月 20 日 16:33:31

yiyi 发表于 2010-12-20 14:40 static/image/common/back.gif
俺是这样设置的，其实不设置也行！

User-agent: *


谢谢兄弟，参考一下哈

hbxtjsl 发表于 2010 年 12 月 20 日 22:34:04

从没设过.........
页: [1] 2
查看完整版本: 大家的wordpress的robots.txt都如何设置啊