知识库文章

Screaming Frog批量检查301跳转:把实际终点与旧新URL表逐条对照

文章摘要
用List模式追到跳转终点,读All Redirects报告,再将实际终点与预期新URL匹配。区分跳错页、循环、未抓全和正常永久跳转,避免只看到301就通过。

本页阅读目录

三条旧地址分别到新产品或首页,批量检查需核对每条实际终点

批量检查301,先准备“旧URL—预期新URL”表,再用Screaming Frog的List模式追到实际终点,导出All Redirects,按旧URL关联两份记录。除了状态码,还要比实际终点是否就是预期页面。旧地址返回301、最终返回200,仍可能全部跳到了不合适的首页。

如果改版涉及几十上百张页面,仅靠抽开几个链接容易漏掉错配。工具能记录实际请求过程,但不知道哪张新页面应该替代旧页面;这项业务判断需要你在抓取之前准备好。

先准备旧新URL表,工具不会替你决定新页面

表里先留两列:完整旧URL、预期新URL。一条旧文章应去对应的新文章,一条旧产品应去能够承接原用途的新产品或说明页。没有相应替代时,另行判断保留、删除或提供什么说明,不为了让每行都有目标就统一填首页。

旧地址可以来自改版前抓取、CMS、站点地图、GSC、访问统计或外链记录。合并来源后去掉完全相同的重复行,但保留有意义的大小写、参数和协议版本,这些差别可能对应不同页面,先按原样保存。

另存原表,再提取旧URL列用于上传。预期新URL仍留在工作表中,后面用来比较;只把旧地址交给爬虫,并不会让它知道你的预期。

单条链接为什么绕路、规则和来源内链分别改哪里,可先看旧URL跳转链修复。下面重点处理多条地址的核对。

List模式要追到终点,不能只看到第一跳

在SEO Spider选择Mode → List,点击Upload,粘贴旧URL或选择相应文件。先用几条有代表性的地址检查设置,再处理完整清单,避免一开始扩大请求量。

进入Configuration → Spider → Advanced,启用Always Follow Redirects。List模式默认抓取深度为0,主要检查上传的地址;这个选项允许它继续跟随跳转,直到终点或达到设置的最大跳数。List模式说明解释了这个行为。

再看Limits中的Max Redirects To Follow。如果报告停在中间地址,先检查是否达到限制或出现循环。达到上限时,报告未必已经到达终点;若是循环,继续加大跳数也解决不了。

开始抓取,等这批任务完成,再检查是否有超时、拦截、额度或范围限制。当前许可是否允许所需配置,按实际版本与功能表确认;普通抓取基础可参考Screaming Frog使用教程。

导出All Redirects,先读这几列

在Reports菜单找到All Redirects并导出。这份报告可用来逐条检查上传地址的响应。即使只跳一次,也要看最终地址是否和预期相同。原厂迁移跳转审计教程区分了固定结果列和后面的逐跳详情。

先看这些字段,遇到异常再深入每一跳:

字段先回答什么
Address这条实际从哪个地址开始
Final Address最后到达哪里
Final Status Code终点返回什么状态
Number of Redirects从原网址到终点共跳了几次
Redirect Loop有没有回到已走过的地址
Temp Redirect in Chain途中是否有临时跳转
Indexability及原因工具判断终点是否具备相应索引条件

工具的Indexable不代表Google已经收录。终点显示Non-Indexable时,读具体原因,再确认它是否符合页面用途;正常客户登录页与计划参与搜索的产品页,不能按同一个要求处理。

中途出现302也不是自动错误。先确认整次变更是否永久,临时活动与长期改址的选择见301和302的区别。真正要追查的是配置是否与预期一致。

按旧URL合并结果,不按行号硬拼

原表与抓取报告可能排序不同,也可能有重复、修正或未成功处理的地址。把报告第10行直接粘到原表第10行,很容易将A产品的终点记到B产品名下。

用完整旧地址找回实际终点

在工作表一的 A、B 列放旧 URL 和预期新 URL。把报告中的 Address、Final Address、Final Status Code 放到 Actual 表的 A、B、C 列。第一行放表头。先核同一旧 URL 是否重复;若有多条记录,先决定用哪次抓取结果。

在工作表一的 C2 和 D2 分别输入下列第一行和第二行。

=XLOOKUP(TRUE,EXACT(A2,Actual!$A$2:$A$1000),IF(Actual!$B$2:$B$1000="","",Actual!$B$2:$B$1000),"未抓到")
=XLOOKUP(TRUE,EXACT(A2,Actual!$A$2:$A$1000),IF(Actual!$C$2:$C$1000="","",Actual!$C$2:$C$1000),"未抓到")

两个查询都用 EXACT 匹配完整旧 URL。C 列记录实际终点,D 列记录终点响应。返回「未抓到」表示没有匹配行,返回空值表示匹配到了旧地址但报告没提供该字段。URL 数超过 999 条时同步扩大各列范围。

XLOOKUP不适用于所有旧版Excel;微软的XLOOKUP说明列有版本限制。公式分隔符也可能随区域设置不同,若当前软件不支持,先用筛选按旧URL查找,或由熟悉表格的人完成关联,始终按完整旧URL找对应结果。

对比预期与实际,把差异留待判断

在 E2 输入下面的初筛公式,再向下填充。公式要求地址匹配且终点返回 2xx。它仍会把首跳是否为预期的 301、页面内容和索引指令留给复核。

=IF(OR(C2="未抓到",D2="未抓到"),"先查覆盖",IF(C2="","终点未提供",IF(D2="","状态未提供",IF(IFERROR(AND(VALUE(D2)>=200,VALUE(D2)<300),FALSE),IF(EXACT(B2,C2),"地址与响应通过","目标不同"),"终点响应异常"))))

例如旧 B 跳到预期的新 B 地址,终点却是 404。E 列会显示「终点响应异常」,维护者应先修新 B 的响应。若看到「地址与响应通过」,再检查旧地址的首跳、链路和终点内容。编码、尾斜杠或参数有差别时,先打开实际页面核对,再决定改不改规则。Excel EXACT 函数说明

结果显示「未抓到」或终点为空时,先到原报告查旧 URL。找不到原始记录,记「本轮未覆盖」,并核对 Original URL 与实际 Address 是否写成了不同版本。找得到记录、但返回超时或无响应,按原响应记失败。找得到记录也有响应、只是没给终点,记「终点未提供」,回到链路明细查是哪一跳停住。三种都留在待查名单里。

把异常分成跳错、链路问题与未覆盖

下面三行都是教学设定,用来说明相同的301可能对应不同处理:

旧地址与预期实际结果该做什么
旧A应到新A产品301后到新A,终点200且内容对应保留记录,检查其他必要条件
旧B应到新B产品301后到首页,终点200终点虽为200,仍要改到对应的新B产品页
旧C应到公开的新C途中有302,终点带noindex核临时跳转用途与新页索引设置
旧B的实际首页终点与预期新B产品分叉,两者需分别核对
原创教学路径:状态正常与替代对象正确需要分别检查,不是一次真实网站迁移的结果。

第二条需要改的是旧B的规则目标,旧入口仍要保留。第三条先问清业务用途:如果临时跳转有合理原因、终点原本就不参与搜索,可能无需按公开产品页要求修改;若它应是长期公开的新产品,才处理不一致的配置。

循环、超时和无响应另成一组,先查具体链路和服务状态。未覆盖项先补抓取,目标不同项再核预期;把具体旧地址和出错的一跳标出来,维护者就能从该地址的第一条异常响应查找对应规则。

修好后仍上传相同旧URL复抓,对照原预期。再把本站能修改的正文、导航或目录链接更新到正确新地址,减少自己可控入口的绕路;外链与收藏仍可能使用旧地址,所以不能顺手删掉旧跳转。

复抓后再逐条对照预期表,确认旧地址到了对应的新页。新页还有收录疑问时,转到网站索引排查;整次改版的优先级可结合谷歌SEO操作流程安排。

常见问题

List模式抓到了页面,能证明从首页能找到它吗?

不能。List直接检查你提供的地址,不代表这张页面有站内入口。要查可发现路径,仍需从公开入口抓取并查看来源链接,两项结果分别记录。

实际终点与预期完全相同,就可以结束了吗?

还要看响应、内容、访问和适用的索引条件。预期表本身也可能填错;目标相同只说明当前两列一致,不替代打开实际页面确认。

全部检查通过,Google排名会马上恢复吗?

不一定。这次检查确认的是当前访问路径与替代关系,Google仍需处理网页变化,内容和其他搜索条件也影响表现。先把已修正的URL记录清楚,再用后续实际数据观察。

我专注 Google SEO、独立站增长与 AI 工作流,实践覆盖 WordPress 外贸 B2B 询盘站和 Shopify DTC 品牌站。从关键词研究、网站架构到内容与技术优化,我关注每一步怎样影响流量、询盘和购买。

本站分享我的项目方法与复盘,说明为什么这样做、具体怎样执行,以及如何判断改动是否有效。

雨果跨境观察员 · 公众号、抖音、小红书同名账号:跨境YOUNG。

学习与查找

从入门开始,或回到问题目录:

关于跨境YOUNG

跨境YOUNG整理WordPress建站、Google SEO与AI SEO / GEO方法,并提供建站、代运营和顾问服务。

需要有人持续推进SEO?

网站已上线,但页面、内容、技术、内链和月度数据没有持续推进?可先诊断范围与优先级,再按月执行与复盘。

最具性价比的服务器

Hostinger 适合预算有限的新站和中小企业 WordPress 网站,托管、备份与基础性能配置比较完整。通过专属链接可享 20% 折扣,购买前再核对机房位置和续费价格。

专属链接含 20% 折扣;跨境YOUNG可能获得佣金,不会增加你的购买成本。