2.1.2_word2vec


文档摘要

背景和引入 在所有的NLP任务中,首先面临的第一个问题是我们该如何表示单词。这种表示将作为inputs输入到特定任务的模型中,如机器翻译,文本分类等典型NLP任务。 同义词表达单词 一个很容易想到的解决方案是使用同义词来表示一个单词的意义。 比如WordNet,一个包含同义词(和有“is a”关系的词)的词库。 导包 如获取"good"的同义词 如获取与“pandas”有"is a"关系的词 WordNet的问题 单词与单词之间缺少些微差异的描述。比如“高效”只在某些语境下是"好"的同义词 丢失一些词的新含义。


发布者: 作者: 转发
评论区 (0)
U