520 同事约会我码字，深度介绍 SEO 工具 screamingfrog

Hi 大家好 我叫若凡

请放心，本文非标题党，文中有真实案例。

同事们520都出去约会了，我在公司安安静静的码会字

这篇内容确实是从5月20日开始动笔的，经过了一周的辛勤努力，我终于在数日后完成了它的撰写。

众多朋友的网站在建设过程中可能未充分考虑搜索引擎优化，因此在后续进行SEO工作时，他们倾向于借助工具来识别网站存在的问题，并评估网站的易用性。

今日向大家推荐一款若凡深度应用的软件，其名为screamingfrog（尖声青蛙）。

只需在谷歌进行搜索，便可发现不同版本的存在，其中付费版与免费版各具特色，免费版能够抓取至500个链接，而在某宝上，您还可以找到价格相对低廉的付费选项。

功能十分强大，但界面设计对我们来说不够友好，目前仅提供英文版本，缺乏中文支持。而且，它无法像网络网页那样，通过右键点击直接进行翻译。这或许会让学习过程变得较为困难，从而劝退了不少中国用户。

我们将详细阐述这款工具的用法，鉴于我们将在周五和周六的SEO线下课程中进行实际操作教学，因此提前做好笔记是很有必要的，这样既能满足课程需求，又能实现一举两得的效果。

一、尖叫的青蛙介绍

“尖叫青蛙”SEO爬虫是一款功能强大的专业SEO工具，它主要服务于网站架构分析、信息采集以及搜索引擎优化问题的诊断。

它能够迅速对网站页面进行扫描，识别出无效链接、内容重复以及元标签遗漏等问题，并据此生成详尽的报告，以助力提升网站排名效果。此外，它还具备生成XML网站地图、分析日志文件等高级功能。

界面整体可以划分为六个部分，对这些部分的具体功能我们不必过分关注。接下来，我们将探讨一些SEO检测的常用指标，并说明它们的具体操作位置。

1、检测403、404

将任何网站地址输入搜索栏进行检验，稍作等待，随后便可呈现与图中类似的界面。

随后，我们需在“响应代码”选项中选取4开头的错误码，进而可以查看到当前有多少链接分别出现了404和403错误。

附带一提，403代码表示服务器虽理解了请求，却拒绝了执行；而404代码则意味着服务器未能找到客户端所请求的资源。简言之，前者是访问被禁止，后者是页面无法找到。

一般网站改版之后会出现这类情况比较多。

2、检测301、302

我们再次点击“响应代码”中的3xx类别，同样可以观察到网站的重定向数量。

301号表示的是一种永久的网页跳转，而302号则代表的是暂时的跳转，通常情况下，我们更倾向于使用301号，除非你只是暂时对链接进行操作，那么302号就会派上用场。

若您欲了解这些重定向页面的详细信息，包括它们的来源链接以及最终跳转去向，请点击链接查看详细内容。

From代表去到的链接，to代表从哪里去。

3、检测页面内链和锚文本

若需查验特定页面的内链传递情况，只需点击相应链接，随后页面将展示该页面的内链数量。

你还可以看到是通过哪些页面来的，使用怎样的关键词进来的。

对评估网站内部链接布局来说，这种方法极为有益。网站规模越大，内部链接的益处就越显著。

4、对于大的网站可以只抓取目录

由于大型网站爬取耗时较长，若按目录进行抓取，所需时间则大大缩短，仅需短短几分钟。

5、检测整站元标题（Meta Title）

从事SEO工作的人都知道，元标题与元描述在SEO中的重要性不言而喻，利用青蛙工具，你可以全面排查出其中的问题，例如检查标题的撰写是否符合规范，字符是否超出限制，以及是否正确包含了关键词等。

6、检测整站元描述（Meta Description）

标题设定是普遍现象，然而我发现不少网站的描述竟然一片空白，而青蛙工具同样能够帮助我们检测出网站的全部元描述。

看到哪个页面有问题，我们就去修改哪个页面。

7、检测整站关键词标签

关键词标签自然存在，然而通常情况下，我们无需自行添加，这是因为Google明确表示，不会将标签的修改作为SEO评估的关键因素。

8、检测整站H1-H6

H1至H3标签在蜘蛛抓取页面内容方面扮演着关键角色，它们能够展现页面的逻辑结构。在检查单个页面的H标签时，你可以直接借助SEO QUAKE工具，或者使用Ahrefs等插件进行操作。

但如果你要检查整个网站，你则用尖叫的青蛙会更加方便。

9、检测URL结构

网站改版后，众多链接可能出现故障；此时，需检查链接的状态码是否正常，是否导致众多页面无法识别，同时，还需关注新链接中是否存在大量动态链接等问题。

9、为网站生成Sitemap地图

若你的网站系自行搭建，那么提供服务的建站公司很可能不会主动为你创建SITEMAP。在这种情况下，你可以利用青蛙爬行功能来浏览你的网站，进而自动生成站点地图。随后，你只需将其导出，便可直接提供给建站方或程序员使用。

10、查看单页面是否被robots协议屏蔽

若你打算查验网站页面是否存在问题，不妨查阅此处，审视网站被Robots抓取的页面是否恰当。若发现关键页面被误屏蔽，那么就需要调整你的程序，对Robots文件进行必要的修改。

11、查看页面数字

在进行SEO优化时，我们倾向于保持关键页面的内容字数稳定，并相信内容越丰富越有助于谷歌识别关键词。因此，设定一个具体的标准，例如要求重要页面至少包含1000字，便能使搜索引擎蜘蛛有效识别，并便于我们进行统一规划。

若您的网站存在低质量垃圾页面或内容重复的页面，同样可以在侧边栏中观察到这些问题。

12、看页面SERP的展示形式

它能向你展示，目前你所设定的标题与描述在Google搜索结果中的具体呈现形式，同时也会告诉你，字符数量是否过多或不足。

13、页面的链接去向

如果你想看哪个页面为你的网站传递了多少内链，也可以看到。

在此情况下，若页面所传递的链接数量为零，需考虑是否有必要为该页面增添新的内部链接。

此外，需注意的是，即便你提供的链接指向了404错误或301重定向，这一情况同样可以被检测出来。

14、保存数据

由于网站爬取过程耗时较长，因此一旦初次完成爬取，即可将数据妥善保存。此后，若需再次爬取同一网站，只需针对该特定文件单独进行操作，无需从头开始。

点击左上角的File，再点击Save即可。

15、数据导出

如果你需要数据共享，你可以直接导出各种格式的文件。

16、爬取网站结构

若欲探查对手网站架构，请点击“Visualisations-crawa树状图”，随后我们便能一目了然地观察到该网站的架构全貌。

我们自行检查时，能够识别出哪些页面有潜力进行优化，哪些蜘蛛抓取的页面权重相对较低。

17、查看网站页面收录情况

借助这张图，您不仅能观察到网站的架构与逻辑，还能识别出哪些层级的页面未被收录，以及这些页面未被收录的具体原因。

18、查看给出去的链接

若你的运营不够细致，抑或是你的网站刚投入使用，尚有许多链接尚未修复，那么务必利用该功能对链接进行彻底的核查。

它能让你知晓这些链接分布于哪些页面，它们指引至何方，以及锚文本的具体内容。

在功能方面，本文所介绍的内容已经相当有限，然而实际上青蛙的功能远不止这些，上述内容仅仅是其中我们日常所频繁使用的部分。

二、网站实际检测

接下来，我用青蛙来检查一个我自己的中文站点

这个站点我刚刚完成了一次改版，然而由于疏于关注，恐怕存在不少问题。

我发现部分页面提供的链接已被设置为301重定向，因此我需要确定并修改哪些链接。

我发现部分页面的链接并未包含“www.”前缀，而我的预设链接却包含了这一部分，因此我需要在网站后台对链接进行相应的修改。

我发现有些我提供的链接出现了403错误，因此我需要及时更换这些链接。

4、我找到很多重复的title，我应该要去改进

5、我找到199个空的Meta 描述，我应该视情况去改进

6、我找到很多的H1重复，我必须要去改进

7、我的H2也有部分的问题

这些页面不仅对提升我网站在搜索引擎中的排名毫无益处，反而可能对网站的进步造成妨碍。我有权选择将这些页面删除，或者将其设置为不索引状态。此外，我还可以采取设置规范链接（Canonical）的措施。

诸多问题尚存，我决定不再继续寻找，而是专心致力于提升我的网站质量。尽管谷歌中文搜索流量有限，但这样的状况实在令人感到尴尬。

是的，自从该网站的托管服务器升级换代后，我已经将其迁移至国内，因此，在搜索排名时，应当更多地关注百度的相关关键词。

我刚刚进行了调查，发现那些逻辑结构相当糟糕的网站，仅仅通过调整了Meta标签，便被百度推到了搜索结果的前列，这种评估标准与Google相比，确实显得不尽人意。

今天的内容就结束了，若您对SEO知识感兴趣并希望获取更多相关信息，请扫描下方二维码添加若凡的微信。