文档摘要

搜索引擎与大模型工作原理拆解 本章是整份指南的技术认知核心。只有看懂 Googlebot 爬虫「如何抓取与索引」、大模型「如何检索与生成」，才能反向推导每一项优化动作背后的机制原理。本章用两张 Mermaid 流程图对比两套机制，并解释它们的差异如何反作用于优化策略。 一、传统搜索引擎的工作机制 传统搜索引擎（以 Google 为代表）的工作流程可以拆为三大阶段：抓取（Crawl）→ 索引（Index）→ 排序（Rank）。 阶段一：抓取（Crawling） Googlebot 是 Google 的网页爬虫。它从一个已知的 URL 种子集出发，沿网页中的超链接不断发现新页面，把页面 HTML（及部分资源）下载回服务器。

---