IP屬地：浙江
[TOC] 動機(jī) 現(xiàn)有的 PTM 有以下缺點： 以預(yù)訓(xùn)練的語言模型為例，它們很好地學(xué)習(xí)頻繁詞的語義，但在受長尾數(shù)據(jù)分布限制的稀有詞上表現(xiàn)不佳。同...
[TOC] 文本生成任務(wù)的基本定義 從給定的輸入序列生成預(yù)期的輸出序列，稱為序列到序列 (Seq2Seq)。 Seq2Seq 任務(wù)和模型于 20...
Python正則表達(dá)式，請不要再用re.compile了?。。?- 知乎[https://zhuanlan.zhihu.com/p/706804...
當(dāng)我們有多個選項，根據(jù)不同值調(diào)用不同對象時，不想寫很多if—else，就用反射，達(dá)到了動態(tài)訪問、不寫死的效果，高內(nèi)聚、松耦合 反射涉及四個函數(shù)：...
line_profiler function前標(biāo)上 @profile kernprof -l -v aaa.py Line：文件中的行號。Hit...
涉及兩個包:官方fasttext包gensim 官方可以下載各種語言的預(yù)訓(xùn)練好的文件但是并不支持finetune，所以下載vec文件后用gens...
References: 圖解Word2vec 經(jīng)典再讀之Word2Vec word2vec Parameter Learning Explain...
ch1 我要做：具體的事 我不要：具體的事 我想做：想打成的目標(biāo) 意志力就是控制這三種。 我要做，是前額灰質(zhì)控制的，晚睡，分心，都會讓你選擇做更...
機(jī)遇 10000小時理論，在自己專業(yè)練習(xí)一萬小時則大成，良好的機(jī)會給有準(zhǔn)備的人，才能抓住機(jī)會。良好的機(jī)會也促進(jìn)10000小時的達(dá)成。 富裕家庭更...