谷歌使我们所有人都令人难以容易地提出一个问题并立即回答。在少于秒的八分之一，所需查询并返回结果。

然而，在我们看来很容易的事情，在背后却是极其复杂的。当我们进行谷歌搜索时，谷歌并不是在网络上搜索当前的答案。相反，谷歌已经抓取了网络，并建立了一个正在查找的数据库。

谷歌使用了一种叫做Googlebot的网络蜘蛛，它可以在网络上爬行发现新的网页，然后将这些网页添加到谷歌的索引中。从本质上讲，爬行是搜索引擎在网络上发现网页的过程。

推荐阅读:SEO克拉的性问题以及如何找到它们

谷歌然后获取新发现的网页，并尝试了解每个页面上有什么。在这个过程之后，称为索引，谷歌将这些信息存储在其索引- a中巨大的数据库存储它已经抓取和了解的页面。

所以当你谷歌某个东西时，谷歌会从它的索引返回所有相关的页面。谷歌的排名算法尽其所能地为终端用户提供最好和最相关的从数百万索引页的结果。

考虑到网上已经存在的内容的巨大规模，你如何让你的网站被抓取，你的内容被索引?毕竟，谷歌必须优先考虑自己的努力。要在搜索结果中看到你的网站，然后看到你的网站对你的目标词的排名，你必须有正确的技术搜索引擎优化基础和最重要的搜索引擎优化元素。让我们从最重要的方面开始我们的技术搜索引擎优化最佳实践清单:爬行和索引。

推荐阅读:3常见的搜索引擎索引问题

如何使用您的网站查找（和修复）问题

Google必须优先考虑它爬行的网页。Web是一个很大的地方，但并非所有网站都满足谷歌的标准 - 一些网站具有低质量，垃圾邮件或谷歌不想抓取或索引的存根页面。

虽然SEO的目的是确保你的网站最少被抓取和索引，但理想的目标是优化排名因素增加搜索可见性这样你的网站就能在SERP上排名了。

要找到您的站点的问题和需要改进的地方，您可以这样做，这样可以使谷歌的工作更加轻松执行搜索引擎优化审计．这将揭示将Google爬行和索引您网站的任何技术问题，并提醒您需要进一步改进的技术优化或内容。您将最终获得SEO因素的待办事项列表，以改善。但是，挑战在于优先考虑那些SEO问题。

推荐阅读:什么是网站审核?

如何优先考虑技术SEO问题？

技术障碍是品牌在搜索引擎优化过程中面临的最大挑战，也是最重要的。如果你的网站没有良好的可用性，你所有的其他SEO努力和内容更新都是毫无价值的。

幸运的是，有一种方法可以规划出解决技术和可用性问题的策略，所有这些都可以确保谷歌能够抓取和索引您的站点。

推荐阅读:15个常见的SEO技术问题和如何解决它们

技术搜索引擎优化基础知识

基础知识是您不会阻止Google访问您的网站，并且您可以轻松地查找和索引您的内容。以下是评估您网站的爬联性和可索引性的区域，应该是您的优先事项。

1.网站地图

首先，重要的是有一个网站地图，包括所有重要的url。站点地图允许谷歌机器人看到你认为最重要的页面。注意:谷歌指出，拥有一个反映有效站点url的XML站点地图并不能保证您的站点被抓取，但您最有可能从拥有一个站点地图中受益，因为它保证谷歌至少知道页面的存在。

网站地图对于大型网站特别有用，因为它们很难跟上内部链接策略指望谷歌找到网页，而爬行的网站。请注意，有一个良好的链接结构是确保谷歌正确导航你的网站的另一种方法。你会想给你最重要的页面提供更多的链接。这将创建一个清晰的页面层次结构。记住要使用相关的锚文本来给出链接所指向的上下文。

2.外部链接

尽管在您的直接控制之外，但向谷歌显示其他人认为您拥有高质量的内容有助于提高爬行能力。当外部链接时，又称为反向链接，指向你的网站，谷歌拾起你的网站的重要性和相关性。(链接建设也展示了你的内容的权威，这将有助于搜索可见性-但内容是后你已经优先考虑了你的技术搜索引擎优化!)

3.robots . txt

另一个对爬行性有影响的是Robots.txt。这个文件告诉机器人哪些页面可以爬行，哪些页面不可以爬行。如果希望对页面建立索引，就需要授予谷歌访问权限，因此需要确保Robots.txt文件没有阻塞用于索引的内容。

推荐阅读:14 SEO中的robots.txt文件的常见问题（以及如何避免它们）

4.HTTPS

我们还建议您使用HTTPS服务页面，并实现对HTTPS url的全站点重写。这样，任何到达HTTP URL的访问者——包括Googlebot——都会通过服务器端重定向自动重定向到该站点的HTTPS版本。

还要注意（和地址）破碎的链接，多重重定向和慢速服务器响应，这一切负面影响您的爬联性。爬虫有预算，宁愿在快速，快速和无错误的网站上花时间。当网站有这些错误时，谷歌意识到它将成为一个麻烦的网站，并不值得他们的时间。

现在站点是可爬行的，我们可以转向技术上的页面搜索引擎优化，这将使谷歌的生活更容易一些。

页面搜索引擎优化技术

在你优先考虑了以上的技术SEO基础知识，让你的页面被抓取和索引之后，同样重要的是关注其他领域的技术SEO，以确保你的网站提供良好的用户体验。

你希望你的页面有一个标题标签，H1标签和优化元描述．这些元数据为谷歌和最终用户提供关于站点内容的更多上下文。

在谷歌的“搜索引擎是如何工作的他们解释说，如果关键词出现在页面的正文或标题中，那么该页面更有可能与搜索者的查询相关。

正如我们所看到的，谷歌努力理解页面的内容。您可以包含结构化数据，以提供关于页面含义的明确指示，并在过程中帮助谷歌—使用模式可以使谷歌的工作更轻松。要全面了解结构化数据和模式，请在这里回顾我们的模式网络研讨会(带转录):技术SEO最佳实践：Schema [WebInar]．

最后，您希望错误页面返回404错误状态代码。要允许谷歌正确索引您的内容，您的站点必须有与页面匹配的返回状态码。

优化技术SEO的网站也可能意味着更快的页面加载时间，因为当页面加载缓慢时，机器人和用户都会受到沮丧。慢动图意味着由于负面的用户体验而返回SERP的遗迹经验和用户返回SERP的机器人。要获得更快的加载站点，请确保您的网站满足以下内容：

  • 在适当的地方启用压缩
  • 在可能的地方启用缓存
  • 代码在可以的地方被最小化
  • 不需要过多的外部资源

推荐阅读:优化页面搜索引擎优化指南

结束思想

按照这些技术搜索引擎优化步骤的优先顺序，很有可能让你的页面被抓取并添加到谷歌的索引中，这样它们就会开始出现在搜索结果中。但正如我们所看到的，技术SEO优化不仅对可爬虫性和可索引性很重要，它还与用户体验．你不仅希望人们找到你的网站，你还希望他们在网站上有一个良好的体验(例如，快速的页面速度，良好的信息流与标题标签，等等)，这样他们不仅停留在页面上，而且转换。

完成上述步骤后，您可以将注意力转换为关键字研究，搜索引擎优化的内容写，以及其他以内容为中心的元素，这些元素将进一步增强你的网页，这样你就可以正确地解决用户的查询，并建立你的搜索可见性。