网站在优化中，对于收录问题也非常重视，但很多时候，网站各方面都做的很好但就是蜘蛛不抓取，这个时候就要考虑是网站结构问题了，导致网站页面无法被正常抓取。那么怎样才能提升搜索引擎的抓取呢？什么样的结构更受搜索引擎的喜爱呢？下面一起来了解一下。

一、做好Robots文件设置

Robots文件又叫：网络爬虫排除标准（Robots Exclusion Protocol）。蜘蛛通过robots.txt识别网站的哪里内容可以抓取，哪里不能抓取，所以一定要设置好该文件的屏蔽设置，让蜘蛛对网站有更高效精准的爬行。

二、网页的层级关系

网页的层级关系主要包括物理层级关系和逻辑层级关系。其中，逻辑层级结构会更方便用户记忆，并且层级简短、长度适中的静态URL也是被搜索引擎蜘蛛所喜爱的。URL结构（以/为划分标志），一般不宜超过4层，层级越复杂的URL会不利于搜索引擎收录，也会影响到用户体验。

三、网站代码的组成

优化人员要尽量避免flash动画效果的使用，因为搜索引擎是识别不了该代码的，这样就会降低网站的爬行和抓取率。同时，对于网站结构中所存在的一些垃圾代码也要进行及时的清理，代码的简洁性也会更有利于用户搜索引擎爬行。

四、网站外链的布局

在网站的页面与页面之间是有权重是可以传递的，做好网站的外链也将会给自身的网站带来更高的权重，能够延伸蜘蛛的抓取长度，从而提升抓取率。还可以搭建网站地图提交给百度，加快蜘蛛对页面内容的抓取，进而使网站结构更受搜索引擎蜘蛛的喜欢。

通过以上的极少，可以了解到搜索引擎喜爱的网站结构是怎样的，相信优化人员在了解了搜索引擎所青睐的规则后，也能够做更好的网站结构优化，促进网站排名提升。