这2天一直在整这个,还真的是能把人整垮,不过貌似自己掌握了一点门道了,算是学习到的一点新知识嘛。分享出来,大家可以看看,不过我的问题还没解决,还得继续。

我进入Google网站管理员工具,发现自己的Googlebot 已被阻止访问 http://www.fresker.com/这问题大条了,咋个会是这样呢,查看自己站点的robots.txt文件,如今内容是这样的:

这不被禁用才怪呢,都怪自己不细心,虽然最开始对robots不熟悉,但是disallow:/这句还是应该清楚的啊,现在好了,搞出这么大的问题。没办法,只好把它改回来,我现在的改为下面的了:

User-agent: *
Disallow: /wp-admin
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-includes
Disallow: /?s=
Sitemap: http://www.fresker.com/sitemap.xml
不过还是没法解决问题,直接把robots.txt文件删除,仍然不见效果。不知道是什么问题。
我也按照其他方式做了,如:
User-agent: *
Disallow:
或者:
User-agent: *
Allow: /
不过都不见效果
在通知Google的时候还是有问题,不知道是不是还要等待刷新。
现在就是把它改为最上面那种方式贴上去,也只有等待了。。。。。。。

我在网上找到了一个关于robots.txt写的还不错的帖子,在此把它的地址贴出来,大家可以去看看,
或许有帮助:
http://ffpan.ctripued.com/2010/03/12/robots-txt/
如果大家有撒建议,麻烦会个贴。

标签: ,
本文连接地址: http://www.fresker.com/old2/archives/198 (转载注明出处)

回复

目前暂无评论

Sorry, 评论已关闭.