第3章：从符号到向量——表示空间的第一次解放

文档摘要

第3章：从符号到向量——表示空间的第一次解放把”国王”减去”男人”加上”女人”，你得到”女王”。这是推理还是算术？一、那句话 2013 年，Tomas Mikolov 在一篇论文里写下了一个方程，后来这个方程被引用的频率，大概超过了那个时代任何一篇 NLP 论文： $$ \vec{\text{King}} - \vec{\text{Man}} + \vec{\text{Woman}} \approx \vec{\text{Queen}} $$ 意思是：如果你把”国王”的词向量减去”男人”的词向量，再加上”女人”的词向量，最近邻的词向量是”女王”。这不是一个被精心设计出来的例子——这是实验跑出来的结果。算法学会了这个关系，没有人告诉它”国王之于男人，犹如女王之于女人”。