June 27

刚刚和舍友出去吃了渍面
虽然有点小贵
但是这味道真是感动到我了
回来之后觉得有点小咸

汇报下这两天的学习情况
昨天早上看完16年的那篇论文本来是感觉良好的
还总结了一些改进方案，真是讽刺
用2020年的眼光去看16年的东西，能不容易吗
看完之后，本来打算看importance那篇的
可是中途想了想去NLP Tracking的网站找了最新几个模型的论文
对比了一下前途有望的应该是prophenet
然后在试图理解的过程中追溯到了XLNet
然后从XLNet追溯到Bert
似乎是对Transfomer的一个改进

顿时有点绝望
但是毕竟这些技术都是层层递进的
也是没办法
可是这样要我怎么找出创新点呢？
真是够了
如果乐观点来说那就是参考文献多了几篇新东西
乐观点吧。。。