發(fā)簡信
IP屬地：北京
-
大模型相關(guān)
使用Transformers加載大模型， 并使用流式輸出進(jìn)行文本生成 使用Transformers加載大模型， 并使用流式輸出進(jìn)行對(duì)話 這種有簡...
-
強(qiáng)化學(xué)習(xí)一個(gè)強(qiáng)化學(xué)習(xí)的入門者，僅用于自己學(xué)習(xí)的記錄 強(qiáng)化學(xué)習(xí) OpenAI出品的強(qiáng)化學(xué)習(xí) (RL) 入門教程，Spinning Up[https://s...
-
讀書《新攝影筆記》取景 焦距 焦距（50mm, 70~200mm 等， 分為固定和可變焦距）決定我們的視角，確定取景的范圍。 焦距的數(shù)字越小表示焦距越短， 拍攝的...
-
一些數(shù)學(xué)知識(shí)的記錄機(jī)器學(xué)習(xí)菜鳥，記錄一些數(shù)學(xué)筆記，方便自己閱讀和理解。 期望E的下標(biāo) 地址一[https://www.zhihu.com/question/305...
-
pytorch-lightning的一些記錄
收集每個(gè)GPU上的輸出在分布式訓(xùn)練時(shí)，每個(gè)GPU都會(huì)有一部分?jǐn)?shù)據(jù)，當(dāng)我們需要使用全部的數(shù)據(jù)進(jìn)行計(jì)算時(shí)，我們需要收集所有GPU的tensor。比如...
-
機(jī)器學(xué)習(xí)一些代碼記錄計(jì)算多分類時(shí)的每個(gè)類別的F1 接口 示例： pytorch 使用K-折交叉驗(yàn)證 pytorch 使用K-折交叉驗(yàn)證[https://github...
-
pytorch的一些操作取出標(biāo)簽對(duì)應(yīng)的樣本特征 第一種操作 第二種操作 取出預(yù)測置信度大于預(yù)測置信度閾值的數(shù)據(jù) 取出預(yù)測置信度大于熵閾值的數(shù)據(jù) torch.Tensor...
-
Slrum 分布式訓(xùn)練+提交作業(yè)
創(chuàng)建分布式+采樣 模型部署 由于模型已被包裝，這時(shí)候直接調(diào)用模型組件會(huì)報(bào)錯(cuò)，比如：model.fc， 會(huì)顯示沒有屬性， 因此一下操作 損失los...
-
加載訓(xùn)練好的BERT參數(shù)
將預(yù)訓(xùn)練模型中的bert部分取出來加載上去 base_model = BaseModel(config)base_model_dict = ba...