2024.3.11 ELMO模型—>解决向量一词多义
elmo解决一词多义问题,与Word2Vec不同的是,可以融合上下文信息
ElMO(专门做词向量,通过预训练)
不只是训练一个Q矩阵,我们还可以把这个词的上下文信息融入到这个Q矩阵中
上图中,左边的LSTM获取E2的上文信息,右边对应获取下文信息
怎么处理一词多义问题
通过连接上下文
apple---->我吃了一个苹果----->[1,20,10]
apple---->我在使用苹果手机----->[1,10,20]
标签:apple,ELMO,一词,上下文,向量,多义 From: https://www.cnblogs.com/adam-yyds/p/18066742