一种利用单词间点状互信息进行单词向量化的编码方法

摘要

本发明公开了一种利用单词间点状互信息进行单词向量化的编码方法，包括：步骤S0，遍历语料，对所有文本进行分词，得到单词集合；步骤S1，初始化词嵌入参数并统计每个单词的词频；步骤S2，遍历语料，从中抽取用于训练词嵌入参数的正负样本对；步骤S3，计算正负样本对的损失函数，求相应词嵌入参数的梯度并更新；步骤S4，遍历若干遍语料后，保存每个单词的上下文词向量，并作为所求词嵌入。本发明能实现更加准确地对单词间的点状互信息进行拟合。