下图中找到网站抓取

shakibkhan2345

对于 Google Chrome，请在开发者控制台中禁用 JS。转到控制台（右键单击 -> 检查），然后单击齿轮。 谷歌浏览器检查 现在，只需单击“调试器”子部分中的“禁用 JavaScript”，刷新页面，您就会看到您的网站，就像搜索引擎在不使用渲染时会看到的那样。 在 Google Chrome 中禁用 JavaScript 这是启用 JavaScript 后 页面的样子（如果 Googlebot 呈现包括 JS 在内的整个页面，那么 Googlebot 将看到它）： 启用 JavaScript 的关键字分析页面 这是关闭 JS 后的样子（这是 Googlebot 在大多数情况下如果不渲染它会看到的样子）： 关闭 JavaScript 的关键字分析页面 你注意到其中的区别了吗？ 除了分析器搜索框（这不会有问题）之外，使用 JS 生成的主H1 标题“关键字分析”也消失了。


这已经是一个问题，因为搜索引擎可能无法理解该页 亚洲手机号码清单 面的内容。 INFO：截至 2022 年 12 月 13 日，此问题已得到修复，因此您不会看到它 因此，请记住始终使用 HTML 而不是 JS 直接在源代码中生成页面上的重要内容（标题、副标题、表格、段落、标签...）。 提示：如果您想了解有关渲染的更多信息，我建议阅读这篇文章： 索引 索引——将页面存储在数据库中。如果满足上述两个步骤，爬虫已经抓取了您的网站，成功渲染并判断该页面的内容有价值，就会对其进行索引。




在搜索引擎方面，索引是搜索引擎在搜索结果中存储和使用的内容数据库。 提示：您可以在、渲染和索引的整个过程： 爬取、渲染和索引的过程 图片来源： 网页架构 就像任何房子一样，网站需要设计正确的架构。网站架构应该基于关键词分析。 站点架构是指如何按层次结构组织站点上的各个登录页面。 下图将让您了解理想设计的网站架构应该如何： 简单的网站架构 通过将各个登陆页面与内部链接（例如主页 -> 类别 -> 子类别 -> 产品）连接起来，您可以确保爬虫到达您想要索引的每个页面。