蜘蛛学习语义关系

搜索引擎爬行网站时收集了大量关于语言结构、主题、内容之间关系的数据。虽然技术上不是为了尝试人工智能，搜索引擎还是已经建立了能够基于常见模式做出复杂判断的知识库。

虽然内容不一定总是要按照最可预见的模式构造，尤其是另外一种排列方法可以为用户提供价值或兴趣时。不过，有逻辑性地组织主题即可以帮助人类用户也可以帮助搜索。

由宽到窄建立主题相关性。很自然，基于相关性的打分模式从文件之间的简单关系扩展到整个网站的分类结构。网站创建者可以充分利用这一点建立一个从宽泛主题流动到更加具体明确内容的层级结构。很明显，在任何分类系统中都有一定程度的主观性。不必太过纠缠于将搜索引擎想看到的完美化，而是首先考虑你的用户，使用这些指南确保你的创意不会使项目停滞不前。