Flux.1 dev 模型的架構(gòu)可以做如下簡化 T5 google 出品的文本模型，這里使用的是 1.1 版本[https://huggingface.co/google/t...
發(fā)簡信
IP屬地：天津
-
Flux 架構(gòu)淺析 -
CosyVoice 添加新音色
CosyVoice 默認(rèn)提供了幾個音色，現(xiàn)在新的需求希望增加新的音色。研究一下了發(fā)現(xiàn)可以在不訓(xùn)練模型的情況下完成新音色的增加。 準(zhǔn)備工作 首先需要準(zhǔn)備包含音色的音頻文件，音頻...
-
RAG or Long-Context LLM, 可能不是個問題對于如何輸入長文本給大模型，論文 Retrieval Augmented Generation or Long-Context LLMs?[https://www.arxiv...
-
模型訓(xùn)練當(dāng)中 checkpoint 作用是什么最近在微調(diào)大語言模型的過程中發(fā)現(xiàn)訓(xùn)練時會在模型生成的目錄出現(xiàn)很多checkpoint開頭的文件夾，這些文件夾下面基本都是一套完整可用的模型文件，還比較占用空間。這里詳細(xì)總結(jié)一...
-
如何快速將celery集成到項目
因為項目需要，經(jīng)常需要將 celery 引入工程，因為它不想其他包那樣安裝后就能使用，所以總結(jié)了以下步驟，方便快速接入。 以下基于 celery 4.4 和 django 4...
-
Sentry 完全離線部署Sentry 離線部署 此篇為 Sentry 完全離線部署的操作步驟，來源于自己在一個無網(wǎng)絡(luò)的 linux 系統(tǒng)中實際操作的總結(jié)。主要是一些踩坑的記錄和操作手法，留作日后參考...
-
記錄一次 core dump 的分析過程背景 收到運維通知，負(fù)責(zé)的工程下面有很多core文件，是python進(jìn)程崩潰后系統(tǒng)生成的。core 文件的生成原理這里不錯介紹了，感興趣的可以自己去了解一下。 分析 分析co...
-
seo - 關(guān)鍵詞規(guī)劃師
在 SEO 日常工作中，時常需要和 關(guān)鍵詞 打交道，了解所選關(guān)鍵詞的流量信息等。百度在營銷工具中面向這樣的需求提供了關(guān)鍵詞規(guī)劃師的工具，下面從技術(shù)角度來介紹這個工具。 文檔地...
-
tensorflow 入門筆記簡介 tensorflow 是谷歌于2015年11月開源的通用計算框架，由谷歌大腦團(tuán)隊基于谷歌內(nèi)部第一代深度學(xué)習(xí)框架 DistBelief 改進(jìn)而來。雖然 DistBelie...
-
TiDB 2.0 Ansible check model 問題
現(xiàn)象 部署TiDB之前，希望先通過添加--check參數(shù)來檢查環(huán)境是否滿足部署條件，比如在滾動升級TiDB之前，通過如下命令做部署前檢查 但是當(dāng)運行至NTP服務(wù)檢查時，報錯了...
-
celery中的時區(qū)陷阱
Django中使用celery執(zhí)行異步任務(wù)非常方便，通過apply_async可以控制定時任務(wù)的執(zhí)行時間。一般使用場景中，比較多的是任務(wù)在一定時間之后執(zhí)行，這時只要指定cou...
-
TiDB數(shù)據(jù)遷移工具Syncer的使用在將數(shù)據(jù)遷移到 TiDB 過程中，通過使用 mydumper 和 loader 可以實現(xiàn)存量數(shù)據(jù)的整體遷移，之后的增量數(shù)據(jù)可以借助官方提供工具 syncer。其基本原理就是將...
-
RabbitMQ隊列中大量unacked消息的問題定位
最近在使用RabbitMQ時發(fā)現(xiàn)總有一些消息隊列中存在大量的處于unacked狀態(tài)的消息，一般來說，如果隊列中ready狀態(tài)的消息數(shù)比較多，可以認(rèn)為是消費者的處理能力不足，可...
-
Celery版本升級記錄
Django項目中使用了舊版本的celery，希望升級到最新版，在此記錄最近今天的工作。 版本變更 3.1.23 -> 4.2.1升級方案 參考官方文檔 主要變化 Djang...
-
RabbitMQ聯(lián)合隊列的搭建和本地測試RabbitMQ Federation Federation (聯(lián)合) 常常用于 RabbitMQ 集群升級時做集群間消息同步以及負(fù)載均衡等場景。本文記錄了 Federati...
-
Rust Learning Note - Part 1
先從示例開始 編譯方法 rustc main.rs ! 意味著調(diào)用的是宏而不是普通函數(shù) Cargo 系統(tǒng)構(gòu)建和包管理工具 新建項目 {cargo new hellocargo...
-
RabbitMQ高可用集群搭建的特殊之處
線上基礎(chǔ)服務(wù)為了避免單點問題，一般在其搭建之時都會建立集群以避免機(jī)器宕機(jī)等極端情況發(fā)生時業(yè)務(wù)能不受影響。比如Redis 3.0之后集群的按照一致性哈希的方式將key-valu...
-
Hive映射HBase表的方法
HBase比較適合key-value形式的存儲和查詢，對于多條件查詢的情況，查詢效率基本依賴rowkey的設(shè)計。對于實時性要求不高的情況，可以通過Hive進(jìn)行離線查詢。這時需...