StreamDiffusion是曠世科技開源的高解析度擴散模型框架,通過解析度感知U-Net和改進的自注意力機制,支持8K圖像生成(最高4096×4096),速度提升1.5-6倍。
基本介紹
- 外文名:StreamDiffusion
- 類別:圖像處理
需求人群,產品特色,
需求人群
StreamDiffusion可用於圖像生成、圖像處理、圖像增強等實時互動式生成領域。
產品特色
該產品特色有有流批處理、無殘差分類器的引導、隨機相似性過濾、IO佇列、用於KV快取的預計算、模型加速工具。
StreamDiffusion是曠世科技開源的高解析度擴散模型框架,通過解析度感知U-Net和改進的自注意力機制,支持8K圖像生成(最高4096×4096),速度提升1.5-6倍。
StreamDiffusionV2系統是一項被MLSys 2026接收的研究工作,將視頻生成從離線生成帶入實時互動,實現真正可用的生成式直播系統。該系統可在多種類型GPU上穩定運行,實現低延遲與高質量生成,在H100上首幀延遲低於0.5秒,並在4卡設備上穩定實現高吞吐量。它通過系統級調度設計,彌合了離線視頻擴散與實時直播之間的鴻溝,使...
Akio Kodaira推出了AI虛擬主播“Shizuku”。他曾在加州大學伯克利分校攻讀博士學位,並於2023年1月在YouTube平台推出了能夠使用英語和日語進行實時互動的AI虛擬主播“Shizuku”。Akio Kodaira以第一作者身份發表了StreamDiffusion論文,提出了一種實時互動式圖像生成管道。該開源項目在GitHub上獲得超過1萬“星”。技術突破與...
.未來,這些虛擬角色有望成為"ai伴侶"或個人助理,全面進入用戶的日常生活. 2023年1月,akio在 加州大學伯克利分校 攻讀博士學位期間於 youtube 推出shizuku虛擬主播 [1] [5-6] .akio開發了streamdiffusion技術,實現每秒超過90幀的實時互動式圖像生成 .2026年2月10日,andreessen horowitz領投種子輪融資1500萬美元,...
