文档摘要

1.1 词法分析：把字符流切成记号 本节摘要：词法分析（Lexical Analysis，也叫扫描 Scanning）把源代码的原始字符流切分成有意义的记号（Token），是编译器的第一道工序。本节讲清三件事：为什么不能直接拿字符串去解析、扫描器如何用有限状态自动机的思路逐字符识别记号、以及手写扫描器时最常踩的三个坑（最长匹配、关键字与标识符的区分、注释与空白处理）。它是后续一切分析的地基——语法树是建在记号流上的，不是建在字符流上的。 会员。《1.1 词法分析：把字符流切成记号》收录于灏天文库文集《编译原理进阶与中间表示 (IR)》，原作者/来源：灏天文库，整理自「灏天文库」，提供技术教程、实践指南与问题解决方案，支持在线阅读、全文检索与知识沉淀，助力开发者系统化学习。本站整理收录，版权归原作者/开源协议所有。

该文档为会员专享，请先登录或注册后再查看

登录 注册

---

作者与出处

原作者： 灏天文库

来源：灏天文库

原文： https://aiknowledge.cn/collection/663-%E7%BC%96%E8%AF%91%E5%8E%9F%E7%90%86%E8%BF%9B%E9%98%B6%E4%B8%8E%E4%B8%AD%E9%97%B4%E8%A1%A8%E7%A4%BA-ir

整理： 灏天文库整理

由灏天文库平台收录，内容或由平台用户上传，仅供学习交流