Google 网站管理员工具刚刚发布了一个 Labs 功能,其中有个功能叫做 Fetch as Googlebot ,你可以在这里模仿 Googlebot,查看你自己的网页代码。不过这个功能是必须通过管理员验证的网站才能查看,没有网站管理权限就没机会了。
而在这个 Labs 功能苏州网站建设公司下面还有一个查看恶意软件的细节功能,自动侦测。
Fetch as Googlebot
在这个功能下,你可以查看任何你自己站点页面代码,通过 Google 机器人的视角,好好的审视自己的站点。操作过程很简单,只要点击 Labs 打开功能,点击 Fetch 按钮查看,等待 Google 机器人的处理,几秒钟后,再刷新一下就可以看到结果了。
有朋友奇怪了,这和我们平时看网页的源代码有什么不同呢? 为什么要麻烦蜘蛛再来一次,而且必须在网站管理员工具中查看
首先你可以看到 Http 的头信息,这个信息可以通过 Live HTTP Headers 等工具查看到,但是直接查看源代码是看不到的,见上图中最顶部,相当于有个小探针,帮你查网站建设培训院校看更多的服务器信息和其他相关信息。
其次你可以比较蜘蛛看到的信息和人看到的信息有什么不同。这个工具用的是和 Google 抓取网页的那个 Googlebot 及其人一样的IP,一样的方式,一样的 user-agent,如果你在不知情的情况下被人进行了代码修改,在蜘蛛下和人为下看到的代码不一样(英文叫 clocking),就可以靠这个工具来检查了。
还有你可以用这个工具测试一些变化,比如重定向。
在这个工具中你还能发现一些额外的东西,比如 javascript 能被 googlebot 抓取
我没有 flash 站,有的朋友也可以看看 flash 在 Googlebot 中是什么样子的。
目前测试发现 Google 机器人只能抓取前 100000 字节的内容,有人就会觉得网页文件最好不要超过这个大小,还有人说做链接不要放在底部。其实这个没关系,这个只是工具的作用,跟真实的 Googlebot 机器人还是有一定差距,你看看新浪的首页,肯定不止 100KB。
小知识:什么是 Cloaking?
通常是说在 Web 服务器上使用一定的手段,对搜索引擎中的巡回机器人显示出与普通阅览者不同内容的公司企业品牌网站建设网页。
现象 1:为了提高在搜索大庆网站建设公司引擎中的名次,不自然地大量向网页中输入关键字,使其不展现给普通用户,单是选择性地发给搜索引擎的一种手法。
现象 2:黑链,今年就流行黑客了。当然,普通黑客的所谓黑链,人可以直接在源代码里看出来,但若有高手用了cloaking,那就不得了。 (据传搜索引擎会对 cloaking 的网站进行严惩)
小知识:如何测试我的重定向?
用这个工具测试的话,就不用再去等待 Google 重新收录你的网站,比如我们给 www.semwatch.org 做了重定向,自动跳到 semwatch.org,你就可以通过这个工具了检测是否顺利了。
本文首发 SEM Watch
南京牧狼文化传媒有限公司简介:
牧狼传媒,牧者之心,狼者之性,以牧之谦卑宽容之心待人,以狼之团结无畏之性做事!
公司注册资金100万,主营众筹全案服务、网站营销全案服务、网站建设、微信小程序开发、电商网店设计、H5页面设计、腾讯社交广告投放以及电商营销推广全案等相关业务,致力于为客户提供更有价值的服务,创造让用户满意的效果!
为百度官方及其大客户、苏宁易购、金山WPS秀堂、美的、创维家电、新东方在线、伊莱克斯、宝丽莱等国内国外知名品牌服务过,服务经验丰富!同时,公司也是南京电子商务协会会员单位、猪八戒网官方认证签约服务商、江苏八戒服务网联盟、南京浦口文化产业联合会会员单位,可以为您提供更好的服务!
主营项目:众筹全案服务、网站营销全案服务、网站建设、微信小程序开发、电商网店设计、H5页面设计、腾讯社交广告投放、竞价托管、网站优化、电商代运营等
合作客户:百度、苏宁易购、饿了么、美的、创维家电、新东方在线、宝丽莱、金山WPS秀堂、伊莱克斯
资质荣誉:百度商业服务市场2017年度最佳图片服务商、南京电子商务协会会员单位、猪八戒网官方认证签约服务商、江苏八戒服务网联盟、南京浦口文化产业联合会会员单位、八戒通TOP服务商、"易拍即合杯"H5创意大赛"三等奖"。