清華聯合字節，開源聽覺大語言模型SALMONN
【資料圖】
清華大學電子工程系日前與字節跳動的火山語音團隊攜手合作，推出一款開源大語言模型 SALMONN。SALMONN 模型支持語音、音頻以及音樂輸入，它可以感知和理解不同類型的音頻內容輸入，并具備多語言語音識別和翻譯以及語音推理等功能。
官方表示，SALMONN 支持語音、音頻以及音樂輸入，可以感知和理解不同類型的音頻內容輸入，并具備多語言語音識別和翻譯以及語音推理等功能。
目前 SALMONN 能夠勝任英語語音識別、英語到中文的語音翻譯、情感識別、音頻字幕生成、音樂描述等重要的語音和音頻任務，同時又涌現出多種在模型訓練中沒有專門學習過的多語言和跨模態能力，涵蓋非英語語音識別、英語到（中文以外）其他語言的語音翻譯、對語音內容的摘要和關鍵詞提取、基于音頻的故事生成、音頻問答、語音和音頻聯合推理等任務。
目前該模型已經發布于 GitHub 中。
關鍵詞：
[責任編輯：xwzkw]
相關閱讀
- (2023-08-23)清華聯合字節，開源聽覺大語言模型SALMONN
- (2023-08-23)我無法理解更無法共情
- (2023-08-23)歷時三個多月！女孩養2500多條蠶做百家被給姐姐當嫁妝
- (2023-08-23)“看到我們村的隊員一直打到決賽，別提多高興啦！”
- (2023-08-23)安徽首家鄉村醫師學院成立 培養“一村一名大學生村醫”
- (2023-08-23)江蘇新能：聯合體中標29.49億元漁光互補項目
- (2023-08-23)照片備份云相冊在哪里（照片備份）
- (2023-08-23)蕭袤奇幻故事·月亮背后的奇遇(關于蕭袤奇幻故事·月亮背后的奇遇簡述)
- (2023-08-23)蕭惠基(關于蕭惠基簡述)
- (2023-08-23)芯原股份(688521.SH)：初步確定詢價轉讓價格為55.10元/股
- (2023-08-23)百聞不如一“件”｜中國國家公園建設中的“科技范”
- (2023-08-23)“21金地01”09時50分發生一筆65.00元的成交，成交額150萬元
- (2023-08-23)上半年巨虧超51億毛利率告負，小鵬汽車何時告別至暗時刻？
- (2023-08-23)追光｜女足世界杯 留下了什么？
- (2023-08-23)江蘇吳中收定增問詢函：要求說明在現階段就為在研產品布局生產線的必要性
- (2023-08-23)四川省寧南縣發布大風藍色預警
- (2023-08-23)網曝《特工任務》定檔，韓庚魏大勛主演，名演員云集，當代諜戰劇
- (2023-08-23)司馬師眼睛怎么瞎的（司馬師）
- (2023-08-23)七夕婚戀觀報告：27%的年輕人同居是為了省房租，同居時男生承擔更多家務
- (2023-08-23)愛瑪科技今日跌8.69% 四機構凈賣出8365.15萬元
- (2023-08-23)全新寶馬X3最新諜照曝光，造型很干練
- (2023-08-23)輿情關注|“網紅景點”變“長紅經典”，攏共分幾步？
- (2023-08-23)蘋果已經開始研發A19仿生芯片：A18明年發布 M4最快明年下半年
- (2023-08-23)德誠公寓買房怎么樣？分析德誠公寓持續升值的原因~
- (2023-08-23)海南海口碧桂園·濱江海岸為什么房價還一直在上漲（碧桂園·濱江海岸房價的上漲原因）
- (2023-08-23)小米小愛同學大升級：支持大模型 可創作文案圖片
- (2023-08-23)中鐵北京工程局城軌公司卓越工程師王明燦：平凡崗位上的“試驗尖兵”
- (2023-08-23)快訊！美商務部宣布將27個中國實體從“未經驗證清單”剔除
- (2023-08-23)科學家呼吁改變胚胎定義
- (2023-08-23)恩智浦不斷創新，將超寬帶（UWB）技術的定位精度提升到毫米級
