(相關資料圖)
清華大學電子工程系日前與字節跳動的火山語音團隊攜手合作,推出一款開源大語言模型 SALMONN。SALMONN 模型支持語音、音頻以及音樂輸入,它可以感知和理解不同類型的音頻內容輸入,并具備多語言語音識別和翻譯以及語音推理等功能。
官方表示,SALMONN 支持語音、音頻以及音樂輸入,可以感知和理解不同類型的音頻內容輸入,并具備多語言語音識別和翻譯以及語音推理等功能。
目前 SALMONN 能夠勝任英語語音識別、英語到中文的語音翻譯、情感識別、音頻字幕生成、音樂描述等重要的語音和音頻任務,同時又涌現出多種在模型訓練中沒有專門學習過的多語言和跨模態能力,涵蓋非英語語音識別、英語到(中文以外)其他語言的語音翻譯、對語音內容的摘要和關鍵詞提取、基于音頻的故事生成、音頻問答、語音和音頻聯合推理等任務。
目前該模型已經發布于 GitHub 中。
關鍵詞:
福建省首個公用型原油保稅倉庫在泉州斗尾港區啟用 記者從泉州海關獲悉,8月22日,在泉州斗尾港區中化青蘭山10 泊位,經泉
車展陣容曝光 MG Cyberster將首次亮相 [愛卡汽車?國內新車?原創] MG官方正式公布了成都車展參展陣容,傳
我國首個獨立知識產權的大連達思科航運指數發布 8月18日,大連東北亞國際航運中心和國際物流中心建設10周年高端論壇,
再下一城!中國U18男籃71分大勝中國澳門 明天下午17:00,中國U18男籃將迎戰中國香港隊,球迷朋友可以登錄企鵝
李易峰回國后顯窘狀!獨自窮游頂烈日排隊買票,幫老人抬繩有善心 近日,消失將近一年的李易峰罕見現身成都機場,還有很多粉絲去接機,場
非對稱“降息”!8月LPR報價出爐:1年期降10BP,5年期按兵不動 非對稱“降息”!8月LPR報價出爐:1年期降10BP,5年期按兵不動,降息,央
清華聯合字節,開源聽覺大語言模型SALMONN 清華大學電子工程系日前與字節跳動的火山語音團隊攜手合作,推出一款開