一对一免费咨询： 13913005726 025-66045668
全部导航
客户案例 
站长们对robots文件肯定都不会陌生，它能够正确指引搜索引擎蜘蛛对网站的抓取动作，正确的书写网站的robots文件很重要。但是站长朋友们：你的robots争取吗？
Google网站管理员工具中的网站配置中有一项抓取工盐城网站建设公司具的权限，作用是测试网站的robots文件，其解析结果中详细列出了文件中的哪一行命令存在错误，下面笔者就通过其负责的齐鲁人才网的robots文件的解析结果来和大家分享一下发现的一些细节错误：
从上面的解析结果中看，其robots文件命令中存在语法错误。
分析：
（1）2，3，4行的错误可以明确，这段命令是错误的，对搜索引擎是不起作用的，这段命令的作用是为了限制蜘蛛的抓品牌网站建设案例取频率，当时是为了减轻网站服务器的压力，现在来看这一点已经不需要考虑了，另一点镇江网站建设公司搜索引擎的蜘蛛程序可以根据网站服务器的承受能力进行抓取，一般不会因为蜘蛛的爬行给网站造成压力。
（2）第12，32，……，38行的语法错误，不是很明确。都是在disallow或者Allow的后面出现了两个？，经仔细分析后发现，出现这类错误的命令中使用的是中文的冒号，而不存在语法错误的命令使用的是英文的冒号。所以就是因为错用了中文标点才导致了robots文件命令中出现了多行语法错误。
总结，在robots文件中应该使用英文标点，中文标点的使用存在语法错误，站长们，你的robots文件中有中文标点吗？
南京牧狼文化传媒有限公司简介：
牧狼传媒，牧者之心，狼者之性，以牧之谦卑宽容之心待人，以狼之团结无畏之性做事！
公司注册资金100万，主营众筹全案服务、网站营销全案服务、网站建设、微信小程序开发、电商网店设计、H5页面设计、腾讯社交广告投放以及电商营销推广全案等相关业务，致力于为客户提供更有价值的服务,创造让用户满意的效果！
为百度官方及其大客户、苏宁易购、金山WPS秀堂、美的、创维家电、新东方在线、伊莱克斯、宝丽莱等国内国外知名品牌服务过，服务经验丰富！同时，公司也是南京电子商务协会会员单位、猪八戒网官方认证签约服务商、江苏八戒服务网联盟、南京浦口文化产业联合会会员单位，可以为您提供更好的服务！
主营项目：众筹全案服务、网站营销全案服务、网站建设、微信小程序开发、电商网店设计、H5页面设计、腾讯社交广告投放、竞价托管、网站优化、电商代运营等
合作客户：百度、苏宁易购、饿了么、美的、创维家电、新东方在线、宝丽莱、金山WPS秀堂、伊莱克斯
资质荣誉：百度商业服务市场2017年度最佳图片服务商、南京电子商务协会会员单位、猪八戒网官方认证签约服务商、江苏八戒服务网联盟、南京浦口文化产业联合会会员单位、八戒通TOP服务商、"易拍即合杯"H5创意大赛"三等奖"。
