为了帮助网站所有者更好地了解Googlebot如何抓取其网站,谷歌发布了新版本的“抓取统计”报告。对于不熟悉搜索控制台中搜索巨头的“爬行统计”报告的用户来说,它可以是一个有用的工具,让您更好地了解您的网站及其内容的在线表现。
比如网站上的抓取速度突然下降,可能说明服务器配置错误或者网站内容质量有问题。然而,如果网站遭受DDoS攻击或其他影响其性能的问题,爬行速度也会降低。
但是,抓取次数的增加可能说明增加了有用的内容,也可能是配置错误导致网站自动生成重复页面或精简页面。
谷歌改进的“爬行统计”报告提供了许多令人兴奋的新功能,如查看主机状态的详细信息、请求总数、显示网站中请求位置的URL示例等。
该报告甚至允许网站所有者访问超时图表,该图表显示了总请求数、总下载量和平均响应时间。如果你的平均响应时间比它应该的要长,可能是时候考虑将你的网站切换到另一个虚拟主机服务了。
新版“抓取统计”报告还包括抓取请求的数据,这些数据按响应、获得的URL的文件类型、抓取请求的目的和Googlebot代理进行细分。同时,报告中主机状态的详细信息为网站所有者提供了过去90天谷歌网站的整体可用性信息。
保持网站正常运行当然很难,但通过使用谷歌“抓取统计”报告中提供的数据,网站所有者可以进行适当的更改,以确保其网站在公司的搜索引擎中可用,并且可以被其用户或客户访问。