Flux.1 dev 模型的架構(gòu)可以做如下簡化 T5 google 出品的文本模型,這里使用的是 1.1 版本[https://huggingface.co/google/t...
Flux.1 dev 模型的架構(gòu)可以做如下簡化 T5 google 出品的文本模型,這里使用的是 1.1 版本[https://huggingface.co/google/t...
CosyVoice 默認(rèn)提供了幾個音色,現(xiàn)在新的需求希望增加新的音色。研究一下了發(fā)現(xiàn)可以在不訓(xùn)練模型的情況下完成新音色的增加。 準(zhǔn)備工作 首先需要準(zhǔn)備包含音色的音頻文件,音頻...
對于如何輸入長文本給大模型,論文 Retrieval Augmented Generation or Long-Context LLMs?[https://www.arxiv...
最近在微調(diào)大語言模型的過程中發(fā)現(xiàn)訓(xùn)練時會在模型生成的目錄出現(xiàn)很多checkpoint開頭的文件夾,這些文件夾下面基本都是一套完整可用的模型文件,還比較占用空間。這里詳細(xì)總結(jié)一...
因為項目需要,經(jīng)常需要將 celery 引入工程,因為它不想其他包那樣安裝后就能使用,所以總結(jié)了以下步驟,方便快速接入。 以下基于 celery 4.4 和 django 4...
Sentry 離線部署 此篇為 Sentry 完全離線部署的操作步驟,來源于自己在一個無網(wǎng)絡(luò)的 linux 系統(tǒng)中實際操作的總結(jié)。主要是一些踩坑的記錄和操作手法,留作日后參考...
背景 收到運維通知,負(fù)責(zé)的工程下面有很多core文件,是python進(jìn)程崩潰后系統(tǒng)生成的。core 文件的生成原理這里不錯介紹了,感興趣的可以自己去了解一下。 分析 分析co...
在 SEO 日常工作中,時常需要和 關(guān)鍵詞 打交道,了解所選關(guān)鍵詞的流量信息等。百度在營銷工具中面向這樣的需求提供了關(guān)鍵詞規(guī)劃師的工具,下面從技術(shù)角度來介紹這個工具。 文檔地...
簡介 tensorflow 是谷歌于2015年11月開源的通用計算框架,由谷歌大腦團(tuán)隊基于谷歌內(nèi)部第一代深度學(xué)習(xí)框架 DistBelief 改進(jìn)而來。雖然 DistBelie...
現(xiàn)象 部署TiDB之前,希望先通過添加--check參數(shù)來檢查環(huán)境是否滿足部署條件,比如在滾動升級TiDB之前,通過如下命令做部署前檢查 但是當(dāng)運行至NTP服務(wù)檢查時,報錯了...
Django中使用celery執(zhí)行異步任務(wù)非常方便,通過apply_async可以控制定時任務(wù)的執(zhí)行時間。一般使用場景中,比較多的是任務(wù)在一定時間之后執(zhí)行,這時只要指定cou...
在將數(shù)據(jù)遷移到 TiDB 過程中,通過使用 mydumper 和 loader 可以實現(xiàn)存量數(shù)據(jù)的整體遷移,之后的增量數(shù)據(jù)可以借助官方提供工具 syncer。其基本原理就是將...
最近在使用RabbitMQ時發(fā)現(xiàn)總有一些消息隊列中存在大量的處于unacked狀態(tài)的消息,一般來說,如果隊列中ready狀態(tài)的消息數(shù)比較多,可以認(rèn)為是消費者的處理能力不足,可...
Django項目中使用了舊版本的celery,希望升級到最新版,在此記錄最近今天的工作。 版本變更 3.1.23 -> 4.2.1升級方案 參考官方文檔 主要變化 Djang...
RabbitMQ Federation Federation (聯(lián)合) 常常用于 RabbitMQ 集群升級時做集群間消息同步以及負(fù)載均衡等場景。本文記錄了 Federati...
先從示例開始 編譯方法 rustc main.rs ! 意味著調(diào)用的是宏而不是普通函數(shù) Cargo 系統(tǒng)構(gòu)建和包管理工具 新建項目 {cargo new hellocargo...
線上基礎(chǔ)服務(wù)為了避免單點問題,一般在其搭建之時都會建立集群以避免機(jī)器宕機(jī)等極端情況發(fā)生時業(yè)務(wù)能不受影響。比如Redis 3.0之后集群的按照一致性哈希的方式將key-valu...
HBase比較適合key-value形式的存儲和查詢,對于多條件查詢的情況,查詢效率基本依賴rowkey的設(shè)計。對于實時性要求不高的情況,可以通過Hive進(jìn)行離線查詢。這時需...