Content 此篇論文主要完成了:1.通過(guò)數(shù)學(xué)推導(dǎo)，找到并證明了限制RNN-based LMs的性能瓶頸之一——Softmax Bottleneck問(wèn)題2.針對(duì)這個(gè)瓶頸，提...
發(fā)簡(jiǎn)信
IP屬地：上海
-
Breaking the Softmax Bottleneck:A High-rank RNN Language Model