word2vec-III
2020/05/23
这几天做的事情主要有:
- 手写MLP解决XOR问题
- 解决种子分类问题
然后今天已经做了总结
从中午开始又回到了vec2word的学习
说实话我真是希望有一个课程能好好讲怎么实现
而不是单纯的只告诉我什么个机理
同一张图我已经看了无数遍
转眼到了5月28
6月都快到了WDNMD
前几天主要是在打黑魂三
然后昨天把word2vec手写模型肝了出来
但是这个还不能算完成
第一,没能找到一个好的测试库去检测是否真的成功了, 至少要把能看出关系的图片输出出来吧我觉得
第二也是今天的学习内容: Negative Sampling,提高训练效率,这个好测,因为我跑10个epoch也几乎要等10几秒,用上之后估计一秒就能完成
后续的学习计划是: Negative Sampling -> Glove Model -> Infomation Extract
最后一步看起来可能有些跳, IE是目前初步确定下来的方向
感觉比起机器翻译会比较有意思。。
不过等完成了前面两个的学习,再好好看看两个方向吧