基本介紹
- 外文名:CosyVoice 2
- 最近更新時間:2025年5月23日
CosyVoice是由FunAudioLLM團隊開發的多語言大型語音生成模型,基於Apache-2.0許可證開源,提供從推理到訓練再到部署的全棧語音合成能力。該模型支持中英日韓等9種語言及18種中文方言,具備3秒音頻零樣本語音克隆功能,支持跨語言音色復刻與情感控制,實時流式推理延遲低至150毫秒。2025年阿里通義百聆推出Fun-CosyVoice3...
Fun-CosyVoice3-0.5B是阿里通義於2025年12月15日宣布開源的語音模型。該模型參數量為0.5B,具備zero-shot音色克隆能力,用戶通過輸入3秒以上的參考音頻即可復刻音色並生成新語音。該版本是Fun-CosyVoice 3.0的輕量化模型,支持9種通用語言和18種中文方言,並具備跨語種音色復刻與情感控制能力。其首包延遲降低50%...
Fun-CosyVoice3.5是通義實驗室於2026年3月2日發布的語音生成模型,支持FreeStyle自然語言指令控制語音生成,擺脫傳統預設標籤限制。該模型新增泰語、印尼語等4種語言支持,覆蓋13種語言;生僻字讀錯率從15.2%降至5.3%,首包延遲降低35%。在Seed-TTS基準測試中詞錯誤率(WER)和說話人相似度(SSIM)均為最佳。Fun-...
CosyVoice支持多語言統一建模、情感控制與零樣本克隆,2025年發布的CosyVoice 2.0將首包合成延遲降至150毫秒。Bert-VITS2採用Transformer架構,實現音頻信號向量化建模,支持端到端訓練流程。MockingBird通過分離文本編碼與聲紋建模,實現低資源條件下的高效語音克隆。MegaTTS是由位元組跳動推出的開源語音克隆大模型。商業化...
萬能君的軟體庫是自媒體創作者,B站創作者。其B站賬號冬粉數達16.5萬。該創作者以B站為核心運營平台,同時運營知識星球分享原創工具,工具追求“解壓即用”。自2022年起,開始發布Disco Diffusion AI繪畫離線版系列工具。2023年,發布音視頻轉文字字幕小工具系列。2024年至2025年,持續發布包括CosyVoice音頻克隆、AI視頻...
minicpm-o 4.5是一個參數量為90億(9b)的全模態大模型,基於siglip2,whisper-medium,cosyvoice2和qwen3-8b以端到端方式構建 [16] .其技術架構的核心創新在於實現了原生全雙工與主動互動能力 [20] . 模型採用端到端的全模態架構,各模態的編碼器/解碼器與大語言模型(llm)通過稠密特徵以端到端的方式進行緊密...
通義百聆是阿里通義實驗室推出的企業級語音基座大模型,致力於攻克複雜環境下的語音落地套用難題。其最初由語音識別大模型Fun-ASR和語音合成大模型Fun-CosyVoice兩大核心模型組成。Fun-ASR基於數千萬小時真實語音數據訓練而成,具備強大的上下文理解能力與行業適應性,可實時處理多種語言。Fun-CosyVoice可提供上百種...
在AI眼鏡套用場景中,套件基於千問VL、百聆CosyVoice等模型,構建了涵蓋感知、規劃、執行及長期記憶功能的互動鏈路。該套件具備音頻、視覺信息處理及環境互動功能,其能力包括複雜任務的自主規劃與推理。套用場景與解決方案 多模態互動技術可為AI/AR眼鏡、智慧型機器人等硬體產品提供語音、視覺與認知互動能力。在AI/AR眼鏡...
2026年3月2日,通義實驗室進一步豐富了Qwen3.5開源家族,推出了0.8B、2B、4B、9B等更小尺寸的模型,並發布了支持FreeStyle自然語言控制的語音模型Fun-CosyVoice3.5與Fun-AudioGen-VD。通義實驗室堅持開源策略,其通義大模型是一個開源模型系列。截至2026年初,該系列累計開源模型超過300個,覆蓋多種尺寸與模態...
WhisperX、Parakeet、Alibaba Qwen3-ASR、ByteDance Volcano等多種模型;支持字幕翻譯(LLM),使用DeepSeek、ChatGPT、Claude、Gemini、Ollama、Alibaba Bailian、Google、Microsoft、M2M100等多種大語言模型;支持語音合成(TTS),提供Edge-TTS、OpenAI TTS、Azure TTS、Minimaxi、ChatTTS、ChatterBox、F5-TTS、CosyVoice...
數字工具方面,字典和詞典App使用漢語拼音注音並提供標準發音音頻,例如《現代漢語詞典》App由原央視主播李瑞英錄製示範音頻;同時,語音合成模型如阿里Fun-CosyVoice3.5最佳化生僻字發音,降低詞錯誤率。在方言保護與研究中,福州方言使用“詁八音”拼音系統進行教學和記錄,並於2019年入選省級非物質文化遺產;語音學研究利用...
