Keras深度学习实战——使用fastText模型构建单词向量

Posted 2022-11-23 盼小辉丶

Keras深度学习实战——使用fastText模型构建单词向量

• • 0. 前言
  • 1. fastText 算法模型
  • 2. 模型与数据集分析
  • • 2.1 fastText 模型分析
    • 2.2 数据集分析
  • 3. 使用 Keras 实现 fastText 生成单词向量
  • 相关链接

0. 前言

fastText 是另一种用于生成单词向量的神经网络模型，其将每个单词视为最小单位，学习其向量表示形式，用于解决由于单词的不同时态和形式造成无法准确获取其向量的问题。本节中，我们将介绍 fastText 算法模型的基本原理，然后使用第三方库 gensim 库中构建 fastText 模型生成单词向量，并测试使用 fastText 模型得到的单词向量效果。

1. fastText 算法模型

fastText 是 Facebook 研究团队提出的算法模型，用于有效学习单词表示和句子分类。fastText 与 word2vec 的不同之处在于 word2v