机器学习:gensim之Word2Vec 详解

一 前言

Word2Vec是同上一篇提及的PageRank一样,都是Google的工程师和机器学习专家所提出的的;在学习这些算法、模型的时候,最好优先去看Google提出者的原汁Paper和Project,那样带来的启发将更大。因为创造者对自己所创之物的了解程度优于这世上的绝大部分者,这句话,针对的是爱看博文的读者,like me。
另外,补充几句。
1.防止又被抄袭,故关键笔记以图贴之。
2.标题前带阿拉伯数字标号的内容,便是使用Gensim的Word2Vec模型过程中的完整流程序号,通常也较为常用且重要。

二 鸣谢

感谢如下文章/论文的详细描述,它们亦是本文的主要测试依据,尤其需要感谢最后四篇博文的精彩解说。

三 Word2Vec 概要

重要API/类

  • gensim.models.KeyedVectors
  • gensim.models.word2vec
    • gensim.models.word2vec.Word2Vec(sentences,min_count,size,worker)
  • gensim.models.Word2Vec(sentences,min_count,size,worker)

Word2Vec类:构建Word2Vec词向量模型

机器学习:gensim之Word2Vec 详解

四 Word2Vec 详解

  • 注:标题前带阿拉伯数字标号的内容,便是使用Gensim的Word2Vec模型过程中的完整流程序号,通常也较为常用且重要。

1 加载语料库

机器学习:gensim之Word2Vec 详解
机器学习:gensim之Word2Vec 详解

2 (初次)训练

机器学习:gensim之Word2Vec 详解

手动构建词汇表

机器学习:gensim之Word2Vec 详解

3 追加训练(更新模型)

机器学习:gensim之Word2Vec 详解

4 存储模型

机器学习:gensim之Word2Vec 详解

5 加载模型

机器学习:gensim之Word2Vec 详解

6 获取词向量

机器学习:gensim之Word2Vec 详解

加载词向量

机器学习:gensim之Word2Vec 详解

7 模型应用

机器学习:gensim之Word2Vec 详解

8 模型评估

机器学习:gensim之Word2Vec 详解

五 补充

  • 欢迎探讨,欢迎Follow~
上一篇:Tomcat架构(四)


下一篇:VS2010/MFC编程入门之二十八(常用控件:列表视图控件List Control 上)