word2vec-0

Ab

  • 怎么将多维投影到2维? (PCA)
  • 什么是n-gram model? 它跟word2vec有什么关系?

keywords:

  • Markov assumption: p(wt |w1,…,wt−1) = p(wt |wt−3,wt−2,wt−1)
  • Maximun likehood

练习:

  • 用爬虫爬网站然后用word2vec算法酸楚vector,然后投影到2维平面展示出来 [OK]
  • 手动实现双层MLP,XOR函数 [OK]