2024年7月5日，阿里巴巴在2024世界人工智慧大會（WAIC2024）上聯合上海美術電影製片廠、中國青少年發展基金會"閱讀中國"基金及多家孤獨症干預機構，正式推出國內首個專為孤獨症兒童設計的AI繪本工具"追星星的AI"。該工具基於阿里自研ModelScope-Agent框架，整合通義大模型的文生圖、語音合成等技術，可實現由故事梗概一鍵生成圖文並茂的有聲繪本。產品特別引入上海美術電影製片廠經典動畫形象模板，並針對孤獨症兒童認知特點最佳化了畫面簡潔度與文本直白度。截至2024年12月，該公益工具已累計服務20萬人次孤獨症兒童家庭，並於2024年12月入選中國孤獨症教育事業成就展。
基本介紹
- 開發機構：阿里巴巴集團聯合上海美術電影製片廠、中國青少年發展基金會'閱讀中國'基金及孤獨症干預機構恆星樂樂、海豚樂樂
- 發布時間：2024年7月5日
- 技術支持：ModelScope-Agent框架
- 合作單位：上海美術電影製片廠
- 上線平台：通義App
- 公益屬性：免費開放使用
開發背景,技術架構,核心功能,套用效果,發展計畫,
開發背景
2024年7月5日，阿里巴巴聯合上海美術電影製片廠、中國青少年發展基金會"閱讀中國"基金及恆星樂樂、海豚樂樂等孤獨症干預機構，在2024世界人工智慧大會上正式發布該工具。開發前期技術團隊調研了100個孤獨症兒童家庭需求，並由阿里巴巴聯合上海美術電影製片廠、中國青少年發展基金會"閱讀中國"基金等專業機構共同開發。
技術架構
- 採用ModelScope-Agent多智慧型體框架，調用通義大模型的角色扮演、文生圖及語音合成能力
- 2025年升級至通義萬相2.1模型，提升畫面生成精度
- 通過ModelScope-Agent框架增強故事沉浸感（相關論文入選NAACL會議）
核心功能
- 支持輸入20字故事梗概生成包含5-20頁內容的有聲繪本
- 提供3級認知難度設定，涵蓋常識認知、社交禮儀等4類主題
- 內置上海美術電影製片廠經典動畫形象模板
- 生成畫面採用高對比色塊與簡單構圖，避免複雜細節
套用效果
- 上線首月即獲得蘋果套用市場精選推薦
- 截至2025年3月累計服務20萬人次孤獨症兒童家庭及特教老師
- 星寶家長反饋其有效解決了個性化教育內容定製難題
- 浙江工業大學王永固教授認可其在社交干預中的輔助作用
發展計畫
- 已開源部分技術框架，計畫開放前後端界面促進協作開發
- 將持續最佳化多平台小程式版本以降低使用門檻
- 技術團隊保持40人規模進行開源維護
