发现插件生成的robots.txt不能被谷歌和360识别 | 张戈博客

  • 时间:
  • 浏览:13
  • 来源:群哥教程网_提供QQ技术导航技术_技术爱好者资讯

上次通过《正确的Win主机网站伪静态设置法律方法》重新设置了玛思阁的伪静态,当时因此使用Rewrite robots没有效果,就安装了有有1个 生成robots.txt的插件,因此发现访问robots地址都在了指定的内容。几天却发现3200完整版被K,仅剩首页,而谷歌因此再收录新页面,有1个 劲以为是我的robots内容有误,于是搜来搜去,改了无数次robots内容。谷歌在【已拦截的网址】选项中有1个 劲显示【语法有误】,在sitemap提交界面也用英文提示“所有内容被robots拦截…”云云。因此百度却未受影响,刚开始英语 英语 了了收录玛思阁的文章了。。。

今天闲下来了,决定处里这些 疑难杂症!于是我去一键复制了别人正常收录的robots内容,因此放进robots插件中生成新的,结果发现在谷歌sitemap提交时依然提示完整版被拦截!我勒个去,这明显说明什么的问题有1个 劲跳出在插件上了!因此使用插件生成了robots,百度站长平台检测又是没什么的问题的,青春恋爱物语纳闷!

于是重新去查Rewrite规则相关资料,并通过UE编辑器重建httpd.ini文件,新增了内容:

RewriteRule /robots.txt /robots.txt [L]

删除robots插件事先 ,发现可只有访问自定义的robots了!事先 httpd顶端都在这条规则,因此不生效!难道是编码错了么?

重新编写robots.txt上传后,再到谷歌提交sitemap,发现什么的问题已处里:

至于效果,因此要等几天再去查看下收录情况表了!

下面贴一下我的httpd.ini和robots内容,以供参考:

httpd.ini

[ISAPI_Rewrite]  
# 32000 = 1 hour  
CacheClockRate 32000  
RepeatLimit 32  
RewriteCond Host: ^marsge.cn$  
RewriteRule (.*) https://zhang.ge$1 [I,R]  
# Protect httpd.ini and httpd.parse.errors files  
# from accessing through HTTP  
# wordpress weijingtai  
# For tag  
RewriteRule /tag/(.*)/page/(\d+)$ /index\.php\?tag=$1&paged=$2  
RewriteRule /tag/(.+)$ /index\.php\?tag=$1  
# For category  
RewriteRule /category/(.*)/page/(\d+)$ /index\.php\?category_name=$1&paged=$2  
RewriteRule /category/(.*) /index\.php\?category_name=$1  
# For sitemapxml  
RewriteRule /sitemap.xml /sitemap.xml [L]  
RewriteRule /favicon.ico /favicon.ico [L]  
RewriteRule /robots.txt /robots.txt [L]  
# For file-based wordpress content (i.e. theme), admin, etc.  
RewriteRule /wp-(.*) /wp-$1 [L]  
# For normal wordpress content, via index.php  
RewriteRule ^/$ /index.php [L]  
RewriteRule /(.*) /index.php/$1 [L]

robots.txt

User-Agent: *  
Allow: /*.html$  
Allow: /wp-content/uploads  
Disallow: /wp-admin  
Disallow: /wp-includes  
Disallow: /wp-content/  
Disallow: /blogmap  
Disallow: /myfeed  
Disallow: /liuyan  
Disallow: /readers  
Disallow: /tougao  
Disallow: /page  
Disallow: /*/page*  
Disallow: /*comments  
Disallow: /bulletin*  
Disallow: /feed  
Disallow: /date/*  
Disallow: /*trackback  
Disallow: /tag/*  
Disallow: /*?*  
Disallow: /*?  
Disallow: /*.css$  
Disallow: /*.js.$  
Disallow: /*.php$  
  
Sitemap: https://zhang.ge/sitemap.xml

robots内容暂时先原本了,事先 观察收录情况表再来修改。

另外,真不知道各位有没有设置过更新服务【WP后台=>设置=>撰写】,在我搜索robots的事先 都看了别人提供的博客更新通知列表,管它有没有用,先再加再说:

RPC更新列表如下:

http://blogsearch.google.com/ping/RPC2  
http://ping.baidu.com/ping/RPC2  
http://rpc.pingomatic.com/  
http://blogsearch.google.com/ping/RPC2  
http://api.my.yahoo.com/RPC2  
http://www.feedsky.com/api/RPC2  
http://api.my.yahoo.com/rss/ping  
http://ping.feedburner.com  
http://www.zhuaxia.com/rpc/server.php  
http://www.xianguo.com/xmlrpc/ping.php  
http://blog.iask.com/RPC2  
http://ping.blog.qikoo.com/rpc2.php  
http://rpc.pingomatic.com/  
http://rpc.technorati.com/rpc/ping  
http://rpc.pingomatic.com  
http://api.feedster.com/ping  
http://api.moreover.com/RPC2  
http://api.moreover.com/ping  
http://api.my.yahoo.com/RPC2  
http://api.my.yahoo.com/rss/ping  
http://www.blogdigger.com/RPC2  
http://www.blogshares.com/rpc.php  
http://www.blogsnow.com/ping  
http://www.blogstreet.com/xrbin/xmlrpc.cgi  
http://bulkfeeds.net/rpc  
http://www.newsisfree.com/xmlrpctest.php  
http://ping.blo.gs/  
http://ping.feedburner.com  
http://ping.syndic8.com/xmlrpc.php  
http://ping.weblogalot.com/rpc.php  
http://rpc.blogrolling.com/pinger/  
http://rpc.technorati.com/rpc/ping  
http://rpc.weblogs.com/RPC2  
http://www.azfeeds.com  
http://www.blogsearchengine.com  
http://www.blogtopsites.com  
http://www.feedbase.net  
http://www.feedsubmitter.com  
http://www.fybersearch.com  
http://www.plazoo.com  
http://www.readablog.com  
http://www.rssfeeds.com  
http://www.rssmad.com  
http://www.rss-spider.com  
http://blo.gs/ping.php  
http://www.pingerati.net  
http://www.pingmyblog.com  
http://geourl.org/ping  
http://ipings.com  
http://www.icerocket.com  
http://www.weblogalot.com/ping

猜你喜欢

秒秒快3讨论群_摆脱腰酸背痛的7种简单小步骤

脊椎支撑著人体的上半部秒秒快3讨论群,对於身体健康有很大的影响,也是反映而是 病痛的指标,就让 背痛可全是闹著玩的。无论生活习惯有无良好,你们歌词 歌词 歌词 歌词

2019-12-13

极速3分快3规律_DIY新年小摆设,给家里增添春节气息

农历新年快要到了!做点年花小摆设极速3分快3规律,给你家增添春节气息。快跟小编学起来吧!年花摆设一:步步高升 适宜:摆放上矮桌上,包括玄关处或长廊的角落等。花材:桃花、剑兰、凤

2019-12-13

好运快3单双_根外追肥对肥料浓度有什么要求?

好运快3单双1、尿素适用于大累积北方花木好运快3单双。施用浓度为0.5%,2、硫酸按适用于酸性土植物。施用浓度为0.2%~0.5%。3、碑酸二氮钾施用浓度为0.1%!0.3%。

2019-12-13

分分pk10是真实吗_为婴幼儿选穿服装ABC

服装是人体分分pk10是真实吗的第二皮肤,对于婴幼儿来说更是不能 。家长在为婴幼儿分分pk10是真实吗制作和取舍服装时,应首先——了解婴幼儿体型和珍理特点婴幼儿服装并不成人服

2019-12-13

分分1分快3官方_1分快3登入_经常戴耳机会影响听力吗?

是的,可能戴耳机收听时,分分1分快3官方_1分快3登入音频都集中在小小耳塞机的振动片上,耳膜接受的音频效应比扬声器分分1分快3官方_1分快3登入放音时集中,且伴随着音乐的起伏,

2019-12-13