什么是Screaming Frog
Screaming Frog 是一款流行的 SEO爬虫工具，专门用于网站抓取和分析。它能够模拟googlebot抓取并批量识别网站结构和SEO错误。
Screaming Frog怎么用
输入域名url，点击start就能开始抓取使用。
免费版本只有500url。
url，状态是否200ok，内容形式， 是否收录 ，标题元描述长度。
主要检查 Headling 1标签 ,一个页面只能有一个。
H2内容，以及meta robots设置是否大部分follow，index。
页面规范化，通常单个页面规范化链接是指向自己的，如果有重复的页面，就要添加规范化，让谷歌知道哪个是主要的页面。
链接类型的查看。
标签切换筛选查看各项数据。
查看是否有链接被robots txt，有几条是正常的。
查看响应代码是否有404，301，500等错误
筛选不安全链接。
其他选项也是同样操作。