搜索引擎的工作过程大体可以分成三个阶段:爬行和抓取、预处理以及排名。搜索引擎用来抓取页面的程序被称为蜘蛛(spider)。要想让自己的更多页面被收录,就要想方设法吸引蜘蛛来抓取。
蜘蛛抓取页面有几方面因素:网站和页面的权重、页面的更新频率、导入链接以及与首页的点击距离。要吸引百度蜘蛛,可以坚持有频率的更新网站内容、主动向搜索引擎提供新页面、搭建外部链接以及制作网站地图。