为什么网站结构很重要

网站结构本质上决定了爬虫的抓取路径和用户的交互体验

（1）用户体验

层级结构不要过深，保证从一个页面到任何一个页面不要超过4次，其实你自己也可以想想太绕了就走了，用户没有耐心的。比如分类页层级，想做竞品，但其实竞品词的关键词非常少，如果单独创建一个分类，底下就只有一两篇文章，这个时候，就不如把竞品词按照内容放入其他的分类里，而不是单独建立。

（2）内部链接

直观的导航和清晰内部链接结构不仅有利于用户，而且也有利于 SEO -> 影响 PageRank 在网站上的传递。

PageRank 是基于其内部和外部反向链接的网页权重。在谷歌早期创建的，它是排名算法的基础，现在仍然被用作排名要素之一。通过将相关页面链接在一起，可以影响网站的权重传递，所以具有更多内部链接的页面可能排名更好。但是不要胡乱地列入大量链接，只需要加入对用户有价值的链接。

切记，网站结构要遵循互联网的基础理论“开放连接”，一定要确保你网站任何一个页面都能顺畅到其他所有页面，也就是说要加次级页面的入口，否则会影响收录，这个是可以证明的。

（3）抓取效率

抓取效率首先是要有开放互通的网站结构，如果一个页面链接到它的有价值的页面很少，用户和搜索引擎爬虫就会很难触达，这样的页面会被认为不重要会被蜘蛛忽略。第二个是要保持更新，网站还有不断更新内容蜘蛛才会愿意来，文章的话每天更新3-5篇，保持均速。

如何确定网站结构

1. 确定网站定位：行业/国家地区/移动端还是PC端
   

2. 利用工具寻找相关竞品
   

3. 观察对应语言地区设备端的竞品网站布局 (画出网站结构原型)
   

4. 根据关键词和上面3步整理自己的网站结构

如何分析

（1）观察同行如何布局

导航栏（顶部栏）大网站页面多，分类多的情况下，一般有下拉导航来进一步展示更多分类

菜单栏

脚步栏

面包屑

锚文本和链路：

每个位置的锚文本是什么

点击锚文本后，会去到哪里，记录纵向和横向有多少分类

注意：最终还是要以用户体验为准，就算着重移动端，pc 端也需要考虑进去

（2）分析关键词

关键词就是整理和分析用户需求，用户有很多需求，每个关键词都代表一部分用户的需求，我们需要对用户的需求进行分类和过滤，只做能做和值得做的，也可以根据关键词来确定用户的差异化需求，设计差异化产品功能。