近日，在華為昇騰AI開發者峰會上，武漢人工智能研究院院長王金橋介紹，基于華為全棧國產化軟硬件平臺昇騰AI，武漢人工智能研究院聯合中科院自動化所、華為正在打造“紫東太初”2.0全模態大模型，可實現文本、圖片、語音、視頻、3D點云、傳感信號等不同模態的統一表征和學習，助推認知智能時代加速到來。

超前布局，以多模態技術探索通用人工智能

(資料圖)

2019年開始，武智院研發團隊瞄準多模態大模型領域聯合攻關，2021年7月正式發布全球首個千億參數多模態大模型“紫東太初”，以多模態技術探索通用人工智能發展道路。

王金橋介紹，有別于以文本為主的大部分語言大模型，“紫東太初”在研發之初即堅持以多模態技術為核心，利用圖-音-文等更多類型數據進行跨模態的統一表征和學習，實現圖像、文本、語音三模態數據間的“統一表示”與“相互生成”，使人工智能大模型的理解和生成能力更加接近人類，為貫通多模態人工智能行業應用提供創新基礎，向通用人工智能邁出關鍵一步。

武智院院長王金橋現場演講

“紫東太初”2.0，從感知到認知世界

針對數字物聯時代的新需求與新趨勢，武智院研發團隊研究探索全模態大模型體系架構和基礎算法，持續推動“紫東太初”技術和應用發展。

在文本、圖片、音頻、視頻的基礎上，“紫東太初”2.0可融入3D、視頻、傳感信號等更多模態數據，并優化語音、視頻和文本的融合認知以及常識計算等功能，進一步突破感知、認知和決策的交互屏障，讓人工智能從感知世界進化為認知世界，延伸出更強大的通用能力。

同時，基于“紫東太初”2.0，武智院近期先后推出了全棧國產化、支持低代碼一站式開發的“紫東太初”開放服務平臺以及人人皆可“妙語生畫”的AI內容創作平臺“江城洛神”等。

王金橋表示，“紫東太初”開放服務平臺可實現高效率開發，同時也是全棧國產化平臺，支持公有云、私有云一鍵部署，行業用戶可基于該平臺開發自己的行業大模型。“江城洛神”AI內容創作平臺，能讓普通人實現“一語成畫”，也可以讓藝術家開拓創作思路和視野，創造出更多更美好的作品。

王金橋介紹，“江城洛神”平臺同時支持數據自動構建及多任務擴展，通過交互實現內容補全、圖像編輯及室內可控的圖像生成。比如，在室內裝修設計方面，只需提供一張戶型圖，“江城洛神”就可以自動生成多種裝修設計樣式，提示詞越多、越精細，生成質量也越高，還能根據不同提示自動對結果進行編輯。目前，“江城洛神”AI內容創作平臺已經對外開放。

“紫東太初”具有廣闊應用潛力

目前，武智院聯合中科院自動化所打造的多模態人工智能產業聯合體已陸續吸納產學研各界近70家成員單位，圍繞多模態大模型技術及應用，“紫東太初”大模型已在手語教學、法律咨詢、交通出行、廣電、醫療機器人、醫學影像判讀等數十個行業場景領域，展現出廣闊的落地應用潛力。

其中，在法律咨詢行業，“紫東太初”大模型僅用0.546秒就可對法律案件進行拆解、提取關鍵事件，在辦公效率方面實現案件分析速度的百倍提升，可有效解決律師整體資源匱乏、服務成本高等問題。

在智慧交通領域，基于“紫東太初”大模型構建的面向公路路網孿生仿真、調度、養護、節能、服務等全周期、全天候、安全安心的數智平臺，讓道路通行率有效提升30%。

在醫療領域，基于“紫東太初”打造的MicroNeuro顱內微創手術機器人系統已完成國際首例深位顱內活檢手術，支持視覺、觸覺的跨模態融合，該大模型的升級也將加速優化針對神經外科手術場景的自主理解。

來源丨武漢人工智能研究院、中新網

出品丨東湖高新區科技創新和新經濟發展局

聲明：此文版權歸原作者所有，若有來源錯誤或者侵犯您的合法權益，您可通過郵箱與我們取得聯系，我們將及時進行處理。郵箱地址：jpbl@jp.jiupainews.com