门户网站的收录与搜索引擎的抓取次数有密切的关系，但是我们并不知道搜索引擎蜘蛛会抓取网站中哪些页面。所以我们就只能通过蜘蛛爬行过的痕迹进行分析，也就是网站的日志。从日志的数据我们可以分析很多相关的数据。今天我们就来分析一下如何创建网站？
第一、网站是否建设有网站地图。一般来说，网站地图是搜索引擎蜘蛛爬行网站的线路图。如果网站有这个元素，那么蜘蛛在网站上爬行就不会花费很多时间，而且也不会迷路。可以说网站地图是专门为蜘蛛而设计的，其作用就是提高蜘蛛的工作效率，加快蜘蛛的爬行速度。如果网站没有网站地图，就好像我们到一个陌生的地方，想要找到一个地方就只能盲目地查找。就相当于网站地图对蜘蛛的作用。因此，网站一定要设计网站地图，方便蜘蛛抓取内容。
第二、网站是否设置了404页面。很多网站可能在这方面并不重视，但是根据实践得出404页面的存在是非常有必要，尤其是对那些有死链接的网站，意义非常重大。404页面可以帮助搜索引擎在遇到死链接的时候，找到新的出口。相信没有一个站长可以保证自己的网站没有死链接。如果网站中的死链接特别多，而有没有设置404页面，那么蜘蛛在抓取内容的时候就会出现差错，导致对网站的友好度降低。
第三、门户网站的导出链接是不是太多。如果一个网站导出的链接太多的话，网站的权重也会被分散。而导出链接会影响蜘蛛的爬行路线，当蜘蛛在爬行网站内容的时候，一般是按照从头开始的，还没到结尾，就有一个导出链接，那么蜘蛛就会顺着这个链接离开页面。所以有些站长会发现，明明蜘蛛已经到页面抓取了，为什么却没有收录，这是因为蜘蛛抓取到一半的时候离开了。
第四、网站中导入的链接太少。与导出的链接相反，导入的链接越多对网站的好处越大。而网站导入链接的标准有两个：普遍性以及质量。在建设导入链接的时候，要重视质量，然后才是数量。如果将顺序调换了，搜索引擎对网站的检索就会变得慢，友好性也会降低。高质量的导入链接对网站内容的抓取才有帮助，才会有利于网站排名的提升。
以上四个因素就是影响搜索引擎蜘蛛抓取门户网站内容的方面，中小型企业网站建设的时候要注意一下。