首先我们要分析网站的内链结果，内链作为网站的桥梁是非常重要，他不仅作为网页与网页的链接同时还是链接网页与蜘蛛的有效途径。更是网页不想传递权重有效方法同时也满足用户的需求。因此网站的内链是非常重要的。合理的内链有助于网站的结构。

　　其次是网站URL，网站URL以前我们强调静态化、唯一化;现在静态化已经很少强调了，因为搜索引擎已经能识别动态化的网站了。因此我们主要来讲一下URL的唯一化，这个在小网站情况还好，在中大型网站URL一般都是唯一化很难的。因为涉及的部门有很多，有时有的部门会不经过你的同意私自改了网站的URL。导致的结果就是几个URL同时指向一个页面。这种事非常危险的做法。因此网站URL一定要唯一化。

　　接着就是网站的结构层次，我们研究爬虫的人都是到爬虫的爬行方法就是宽度优先大化爬行深度，这句话什么意思呢就是爬虫优先爬行宽度的链接其次才是在爬行网站深度的链接。因此沃恩在网站结构层次上一定不能曾够太深，对于小网站而言三道四层足以。网站结构太深会影响网站页面的收录量。基本的收录量都上不去就什么都别谈了。