您可以轻松上传现有的 XML 站点地图或站点地图索引来检查抓取错误或不一致之处。
转到 Screaming Frog 中的模式菜单并选择列表如何验证我现有的。然后点击屏幕顶部的上传,选择下载站点地图或下载站点地图索引,输入站点地图网址,然后开始抓取。一旦 SEO Spider 完成抓取,您将能够找到任何重定向、404 错误、重复的 URL 等。您可以轻松导出检测到的错误。
识别 XML 站点地图中缺失的页面
您可以配置扫描参数来检测并比较站点 XML 文件中的 URL 与站点内的 URL。
在主导航中转到配置->蜘蛛,在底部有几个 XML 站点地图 手机号码数据 的选项 – 通过 robots.txt 文件自动发现 XML 站点地图或在框中手动输入 XML 站点地图链如何验证我现有的接。 *重要提示 – 如果您的 robots.txt 文件不包含您想要抓取的所有 XML 站点地图的正确目标链接,则必须手动输入它们。
更新 SITEMAP XML 文件的扫描设置后,转到导航中的 CRAWL 分析点,然后单击配置并确保已注意到站点地图按钮。首先,运行完整的站点扫如何验证我现有的描,然后返回到“抓取分析”并单击“开始”。
一旦抓取分析完成,您将能够看到任何抓取差异,例如 管理家族企业面临的主要挑战是什么? 在完整站点抓取期间发现的 XML 站点地图中缺少的 URL。
常见问题
如何确定为什么您的网站的某些部分未被索引或排名
想知道为什么有些页面未被索引吗?首先,确保它们没有被意外放置在您的 robots.txt 文件中或被标记为 noindex。接下来,您需要通过检查内部链接来确保 SEO Spider 可以到达相应页面。网站上没有内部链接的页面通常被称为“孤立页面”。
要识别缺失的页面,请按照以下步骤操作:
在主导航中转到配置->蜘蛛,在底部有几个 XML 如何验证我现有的站点地图的选项 – 通过 robots.txt 文件自动发现 XML 站点地图或在框中手动输入 XML 站点地图链接。 *重要提示 – 如果您的 robots.txt 文件不包含您想要抓取的所有 XML 站点地图的正确目标链接,则必须手动输入它们。
转到配置 → API 访问 → Google Analytics – 使用 API,您可以获取特定帐户和视图的分析数据。要从自然搜索中找出孤立页面,请确保将它们分成自然流量。
如果您希望将在 GA 中发现的 URL 包含在您的完如何验证我现有的整网站抓取中,您也可以转到常规 → 抓取在 Google Analytics 中发现的新 URL。如果未启用此功能,您将只能在“孤立页面”报告中查看从 GA 中提取的新 URL。
转到配置 → API 访问 → Google Search Console – 使用 API,您可以获取特定帐户和视图的 GSC 数据。要查找孤立页面,您可以搜索那些获得点击和展示但未包 阿根廷數據 含在您的视图中的 URL。如果您希望将在 GSC 中发现的 URL 包含在您的完整网站抓取中,您也可以转到常规 → 抓取在 Google 搜索控制台中发现的新 URL。如果未启用此设置,您将只能在“孤立页面”报告中查看从 GSC 检索到的新 URL。
扫描整个站点。扫描完成后,转到抓取分析->开始并等待其完成。
查看每个选项卡上丢失的 URL 地址或对所有丢失的 URL 地址执行批量导出,转到报告 → 孤立页面。
如果您无权访问 Google Analytics 或 GSC,则可以使用 Internet 选项卡上的 HTML 过滤器以 .csv 文件的形式导出内部 URL 列表。
打开 CSV 文件并在第二张表上插入未编入索引或排名较差的 URL 列表。使用 Vlookup 查看该 URL 是否已在扫描时找到的第二张表的列表中。