域名SEO收录量实时监测的核心目标是什么? 核心目标是要帮助站长和SEO从业者, 能够第一时间掌握网站在搜索引擎中的收录状态变化。这样就能及时发现收录异常的情况, 进而定位出现问题的原因, 并且采取有效的修复措施。
这篇文章会从哪些维度来提供一套完整可执行的监测方案呢? 这篇文章会从以下三个维度入手: 第一个是监测指标, 第二个是实操方法, 第三个是工具选择。
需要监测的核心指标
(1)总收录量说的是搜索引擎会把网站的所有页面都抓下来, 然后放进数据库里, 这样算出来的总数就是总收录量, 这个数字能够反映出网站整体上被爬取和索引的规模到底有多大。
(2)去掉404页面还有soft-404页面以及低质量页面之后, 剩下的那些真正参与排版的页面的数量。
(3)新收录速度和掉量速度, 这两个概念分别指的是每日新增的收录页面数量, 以及每日脱落的页面数量, 其目的是为了判断收录的趋势。
(4)这个收录占比指的, 是各个具体的内容板块, 比如说文章页面、产品页面、以及分类页面等等这些板块, 它们各自所获得的收录数量, 在整个网站总收录数量当中所占的比例情况, 这样做的主要目的, 是为了能够准确地定位并找出其中存在的结构性问题。
5个实操监测方法
方法1是借助搜索引擎的站点指令来开展查询, 用户需要在百度、Google这些引擎的地址栏里面输入特定的字符串, 也就是“site:你的域名”, 借此方式来查看当前处于收录状态的总量大小, 这里建议大家在一个周之内固定一个具体的时间点去执行一次该操作, 并且把数值的变动情况记录下来, 这种方法本身是不需要花钱的, 但是需要注意的是, 所获取到的数据会伴随着大约7至14天的缓存延迟现象。
方法2: 利用搜索引擎后台的实时数据。你要登录百度站长平台(ziyuan.baidu.com)或者是Google Search Console, 去查看索引模块里面的实时收录页面数, 以及已索引和未索引的明细情况。
这个数据的更新周期是长达24小时的, 它属于免费的内容, 同时也是一种非常权威的监测入口手段。
方法3是使用第三方的SEO工具来进行每日的追踪。可以利用像5118、爱站、Ahrefs这类工具去设置域名的收录量日报。这些工具会在每天自动抓取数据并且生成趋势图。这种功能是支持对多个域名进行批量的对比检查的。
方法4, 那就是自己建一个抓取脚本。具体来说, 就是用Python加上Scrapy或者是Node.js这些工具, 然后定时去干一件事儿。什么事? 就是向搜索引擎提交你的sitemap文件。提交了之后还得做什么动作? 对, 得对比一下返回来的索引状态到底是啥情况。
这个任务不是随便执行的, 每过6个小时就要执行一次。为啥这么干? 为了能够实现那种准实时的监测效果。这个方法比较适合哪些人? 适合那种有技术能力的工作团队。它能做到什么程度? 能精确到每一个单体的URL的收录状态到底有没有问题。
方法5为多引擎交叉验证。要同时针对百度、Google、Bing、搜狗执行site查询操作, 来对各个搜索平台收录情况出现的差异进行对比。
假如出现某一搜索引擎的收录数量大幅下降, 而其他几个平台的收录情况都属于正常, 那就很有可能表示该特定搜索引擎进行了抓取规则方面的调整, 或者站点触发了与该引擎相对应的处罚规定。
工具选择与实操要点
在日常运维当中, 人们一般会建议采取用搜索引擎的后台加上第三方这个工具这样子的双通道的方案, 也就是说, 把那个后台的数据作为是一个权威的基准参考, 然后让那些第三方的工具去补充一些关于趋势分析以及竞品对比方面的信息, 而在域名注册和解析的那个层面里面, 像gname.xin那样的一些域名服务商所提供的DNS管理面板, 是能够直接关联到站长工具的, 这样就可以便于人们在发生域名变更或者是迁移之后去快速地验证一下收录状态是不是会受到什么影响。
这个在实际操作层面的关键要点。
监测频率是这样规定的, 对于关键的站点需要每日去查看进行监控, 而对于一般的站点则需要每周进行一次检查。
异常阈值是指, 当单日掉落的数量超过总收录数量的百分之五时,即触发排查工作。
对于规范方面的相关记录域名SEO收录量实时监测, 应该采用统一的时间戳标准, 具体来说是utc plus 8这个时区, 同时还要把操作人的信息给记录下来, 这样能够便于进行后续的追溯工作。
把收录出现异常的那个时间点, 拿去跟服务器日志进行对齐处理, 同时也跟部署记录进行对齐操作, 然后通过这种比对的方式来明确, 到底是由于技术方面的变更所导致的, 还是因为策略上的变更所引起的。
高频疑难
问: 收录量突然出现归零的情况, 这时候应当怎么办。
针对您提出的问题, 第一步是要先确认那域名的状态, 看看它是不是已经过期了。同时也要检查一下那个SSL证书还是不是有效的。还要看一看robots.txt这个文件, 有没有在里头把整站都误屏蔽掉了。要是发现域名本身是没有问题的, 那就应该去把sitemap提交到站长平台那里。
并且在提交之后, 要去申请那个手动的收录操作。一般情况下, 过个48小时到72个小时左右, 网站就能恢复了。但是如果过了这么久还是没有恢复过来, 那就要再仔细检查一遍了。看看是不是触发了搜索引擎的那个安全处罚机制。一旦确认是这个问题, 就需要去对应的平台去提交申诉材料了。
问: 新域名需要经历多长时间, 才能拥有稳定被收录的表现情况?
在正常情况下, 新上线的域名, 在接下来的三十天之内, 百度每天的收录数量, 是可以稳定在五十到两百页的范围里, 但是, 这个情况得看更新的频率, 等过了九十天之后, 网站就会进入到一个平稳运行的状态, 要是三十天过去了,还是没有收到任何收录的通知域名SEO收录量实时监测, 那么首要的事情, 就是赶紧检查一下, 是不是站点被降权了, 或者是技术性的设置上出了什么错的迹象。
