緣起：今天想嘗試在vs code中使用python，出現(xiàn)了幾行warning，大意是conda無(wú)法激活。 總結(jié)經(jīng)驗(yàn)： Anaconda可以看作是一個(gè)虛擬機(jī)，我們的python...
發(fā)簡(jiǎn)信
IP屬地：廣東
-
vs code更改默認(rèn)終端 conda activate激活
-
模型 FLOPs, MACs, MAdds 關(guān)系 以及 常用計(jì)算工具的主要差異
論文中比較模型的性能時(shí)，需要提供模型的大小。 衡量模型大小的指標(biāo)有：parameters和 [FLOPs, MACs, MAdds] 中三者之一。 1. FLOPs, MAC...
-
-
[解決]GPU顯存未釋放問(wèn)題我們?cè)谑褂胻ensorflow+pycharm 或者PyTorch寫(xiě)程序的時(shí)候,有時(shí)候會(huì)在控制臺(tái)終止掉正在運(yùn)行的程序，但是有時(shí)候程序已經(jīng)結(jié)束了，nvidia-smi也看到?jīng)]有...
-
LGTM : code review 行話
程序員這個(gè)行業(yè)，不管你是大佬還是小弟，代碼code review是必不可少的。那么在git上，大家日常交流的縮寫(xiě)語(yǔ)，往往一下就能看出你道行的深淺，至少是入行時(shí)間，哈哈，不要露...
-
UML類(lèi)圖1.類(lèi)圖基礎(chǔ)屬性 2.類(lèi)與類(lèi)之間關(guān)系 在UML類(lèi)圖中，常見(jiàn)的有以下幾種關(guān)系: 泛化（Generalization）, 實(shí)現(xiàn)（Realization），關(guān)聯(lián)（Associati...
-
優(yōu)化器方法-LARS(Layer-wise Adaptive Rate Scaling)最近看到一篇博客，將最新的LookAhead和RAdam優(yōu)化器結(jié)合，產(chǎn)生了一個(gè)新的算法——Ranger，獲得了比單獨(dú)使用RAdam要好的效果。后來(lái)有人將LARS與Ranger...
-
GPU卡的底層通信原理1.引言 為什么要并行 近幾年，依賴(lài)大規(guī)模標(biāo)注數(shù)據(jù)和大量的可學(xué)習(xí)參數(shù)，深度神經(jīng)網(wǎng)絡(luò)才能異軍突起，占得機(jī)器學(xué)習(xí)半壁江山。然而，也是因?yàn)檫@兩點(diǎn)使得深度學(xué)習(xí)的訓(xùn)練變得極其困難，尤其...
-
113. 【torch】反向傳播棄inplace操作
報(bào)錯(cuò)：RuntimeError: one of the variables needed for gradient computation has been modified...
