网页开发设计

robots文件可能会影响网站的移动适配

有的网站花了大工夫去做移动端适配,反而不被搜索引擎待见,其实这个里面也是有原因的。先来看看事情的经过,站长今天在谷歌移动适配检测中发现了经谷歌检测的网站和我的原网站打开效果不一样,简直是丑陋至极。

后来谷歌提醒了是robots.txt这个文件没有给搜索引擎权限。仔细一想,大家的robots.txt不都是有着这么一行吗?

  1. Disallow: /wp-content/

Disallow: /wp-content/这样一来,你的主题文件夹里面的css文件,主题图片,js文件搜索引擎都无法在爬行的时候访问,所以在检测网站移动性适配的时候会显得粗陋不看。

所以,我们需要在robots.txt里面再改一改,以免我们千辛万苦写的自适应反而不能被识别!这里给大家介绍robots.txt的Allow语法规则。用了Allow规则之后,会让路径下的文件可以被搜索引擎爬取。Allow的用法如下:

以下写法,Disallow在前,Allow在后,搜索引擎无法爬取Wildfire主题文件夹。

  1. Disallow: /wp-content/
  2. Allow: /wp-content/themes/Wildfire/

以下写法,Allow在前,Disallow在后,搜索引擎可以爬取Wildfire主题文件夹。

  1. Allow: /wp-content/themes/Wildfire/
  2. Disallow: /wp-content/

所以我们在robots.txt中加上这么一个Allow规则,让主题文件夹可以被抓取,这样就可以让谷歌百度等搜索引擎正确的抓到我们网站的移动样式啦!

(0)
【友情提示:】
1、[焦点热议]及其子栏目内容为网络转载,其它栏目内容系作者个人原创文章观点,不代表除作者外的任何第三方观点赞同或支持;
2、「♚付涛纪实阁♚」原创文章均为本人工作、学习过程中重点事项点的记录,便于日后面对相同问题时候的复盘总结,同时原创内容遵循创作共用版权 CC 4.0 BY-SA 协议,转载请附上原文出处链接及声明,否则默认视为侵权。
3、如本站个人观点有涉及不妥的地方,可联系【QQ:860227477】,提供合理合法依据,可无偿给予修改或删除。
4、同时针对站内所有来自于【精品软件共享】及其子栏目所分享的软件均为网络收集,请用户下载后24小时内删除,否则引起的争议由使用者承担,与本站无关;
5、针对本站内容若有异义,亦可直接与【法律顾问:易兴俊,律师联系电话:13825799821】直接联系沟通;
LensNews

发表评论