多伦多大学研究团队公布理解线行词类比研究
来自多伦多大学以及 Vector Institute 的研究团队在一篇名为《关于理解线行词类比》的论文中为 GloVe 模型提供了单词类比算术的正式解释,并且在没有做出如此强有力的假设的情况下,对负抽样(SGNS)提供了一些正则解释。研究理论表明:1)SGNS 和 GloVe 空间中欧几里德距离的第一个信息理论解释;2)使用加法组成 SGNS 词向量的新颖理由;3)GloVe 模型论文中提出的关于单词类比的直观解释的正式证明。该论文已被 ACL 2019 收录。