学习SEO之前，必须要先了解搜索引擎的工作原理，很多SEO问题及解决办法，都是从搜索引擎原理出发，都是自然而然的事情。

SEO在保证用户体验的基础上尽量迎合搜索引擎，也就是说做SEO，要从用户体验和搜索引擎喜好这两方面考虑。

迎合搜索引擎说白了就是按搜索引擎的喜好发文章，让搜索引擎在抓取文章的时候更省力，抓取到的文章展示给用户时，能给用户带来良好的体验。

换个角度来看，也就是我们需要了解搜索引擎面对的挑战是什么？这样我们才能更好的理解搜索引擎为什么要这样要求我们，下面来详细介绍一下搜索引擎面对的挑战有哪些？

（1）页面抓取需要快而全面：

互联网是一个动态的内容网络，每天有无数页面被更新、创建，无数用户在网站上发布内容。想要返回最有用的内容，搜索引擎就要抓取最新页面。但是由于页面数量巨大，搜索引擎蜘蛛每更新一次数据库存中的页面都要花很长时间。

现在主流搜索引擎都已经能在几天之内更新重要页面了，高权重网站上的新文件在几小时甚至几分钟之内就会被收录。不过，这种快速被收录和更新的情况也只局限于高权重网站，很多页面几个月不被重新抓取和更新也是常见的。

要返回最好的结果，搜索引擎必须抓取尽量全面的页面，这就需要解决很多技术问题。

（2）海量数据存储：

一些大型网站单是一个网站就有百万、千万个页面，可以想像，网上所有网站的页面加起来是一个什么规模的数据量。搜索引擎抓取页面后，还必须存储这些数据，且数据结构必须合理，具备很高的扩展性，这对写入和访问速度的要求也很高。

除了页面数据，搜索引擎还需要存储页面之间的链接关系和大量历史数据，这样的数据量是用户无法想像的。据估测，百度有三四十万台服务器，谷歌有几十个数据中心，上百万台服务器。

我们经常在搜索结果中看到，排名会没有明显原因地上下波动，甚至可以刷新一下页面，就会看到不同的排名，有的时候网站数据也可能丢失。这些情况有时候与大规模数据存储，同步的技术难题有关。

（3）索引处理快速有效，具有可扩展性：

搜索引擎将页面数据抓取和存储后，还要进行索引处理，包括链接关系的计算、正向索引、倒排索引等。

要想提供相关又及时的搜索结果，仅依靠抓取是没有用的，还必须进行大量的索引计算。由于随时都有新数据、新页面的加入，索引处理也要具备很好的扩展性。

当数据多到难以想象的海量时，就无法避免出现索引库无法索引新页面、数据丢失之类的问题。

（4）查询处理快速准确：

用户在搜索框输入查询词，点击搜索按钮后，通常不到一秒，搜索结果页面就会显示相关、质量高、有用的信息，并且按照相关性、权威性排列。表面上看这一过程非常简单，实际上涉及了非常复杂的后台处理。

在最后的查询阶段，另一个难题是速度，这考验了搜索引擎怎样在不到一秒的时间内，从可能多达上亿个包含查询词的页面中，快速找到最合适的页面并计算排名。

（5）准确判断用户的搜索意图：

为进一步提高搜索结果质量，近几年搜索引擎都非常关注准确判断用户搜索意图的问题。不同用户搜索相同的查询词，很可能是在寻找不同的东西。比如搜索“苹果”，用户到底是想了解水果、计算机，还是电影？

搜索引擎目前正在致力于基于用户搜索习惯的了解、历史数据的积累，在语义搜索技术的基础上，判断搜索意图，返回更相关的结果。