索引 (Indexing) 是搜索引擎将爬取到的网页内容处理、分析并存储到搜索数据库中的过程。只有被索引的页面才能出现在搜索结果中。索引过程包括解析 HTML 内容、提取文本和元数据、分析页面结构和链接关系、以及评估内容质量。
Google 的索引过程分为发现、爬取和索引三个阶段。发现阶段通过站点地图和链接找到新 URL；爬取阶段下载页面内容；索引阶段分析内容并决定是否将其加入搜索索引。并非所有被爬取的页面都会被索引。欢迎参阅在 Amazon 搜索搜索引擎索引书籍。
影响页面是否被索引的因素包括：内容质量和独特性、页面加载速度、移动友好性、robots.txt 和 noindex 标签的设置、以及网站的整体权威性。
在 URL 缩短服务的场景中，短链接本身通常不需要被索引，因为它们只是重定向到目标页面的中间层。但服务网站的内容页面 (如用语集、文章、帮助页面) 需要被正确索引以获得搜索流量。在 Amazon 搜索网站 SEO 书籍提供了索引优化的实用指南。