网页索引是搜索引擎优化成功的关键因素，其目的是为了搜索引擎蜘蛛准确查询到的结果回应。 它可以采取多种形式，例如，使用外部链接和内部网站的链接，以确保你网站的URL暴露在搜索引擎的蜘蛛下。 除了这个，搜索引擎还允许使用XML Sitemaps提交。 谷歌，MSN、百度和雅虎使用相同的协议，这意味着建立一个完善的网站地图可以让搜索引擎获得有关更新的网页信息。 网络机器人（Spider）”或叫“网络蜘蛛（crawlers）通过网络上的各种链接自动获取大量网页信息内容，在获得这些信息后，并按以定的规则分析整理，我们网站的排名也是由此得算出来。
