文本創作
文案創意寫作、文本擴寫、文章續寫、內容摘要、多語種翻譯、寫詩作詞、寫代碼、解數學題樣樣拿手

知識問答
專屬知識庫和聯網搜索實現大模型檢索增強,有效緩解幻覺,加速知識學習,使得大模型更加實用和可信

多模態理解
關注圖文音三模態數據之間的關聯特性,支持圖文問答、視覺定位、視覺指代、OCR問答、音樂理解

多模態內容生成
多種藝術風格的AI作畫,精準控制繪畫細節;文本指令可智能作曲生成音樂片段

3D理解
基于點云數據的3D場景理解和物體感知能力

信號分析
支持雷達信號鑒別與知識交互,可借助模型快速掌握信號基本來源及參數等


紫東太初是由中國科學院自動化研究所和武漢人工智能研究院推出新一代多模態大模型,支持多輪問答、文本創作、圖像生成、3D理解、信號分析等全面問答任務,擁有更強的認知、理解、創作能力,帶來全新互動體驗。

大模型開放服務平臺
面向行業AI應用開發者和算法研究人員的一站式大模型訓推服務平臺

開箱即用,一鍵微調
內置多種參數版本的預訓練大模型和完整開發工具鏈,零代碼實現數據導入、清洗配比、在線標注、模型微調、服務發布、插件編排的模型開發全流程

全棧國產,適配信創
兼容主流計算芯片和開源框架,支持全棧國產化軟硬件解決方案,滿足信創需求,推動行業的數字化轉型

快速部署,靈活交付
支持多種公有云SaaS API服務、云上專屬資源池、私有集群部署、超融合訓推一體機等多種交付部署方案

平臺核心能力
數據中心
導入和管理多模態數據集,內置豐富數據預處理算子,實現數據清洗、配比、發布

智能標注
多種標注任務模版,支持模型智能標注和人工復核,在線編寫指令

模型微調
零代碼一鍵微調,可視化訓練過程,實時日志輸出和資源監控,支持多機多卡分布式訓練

服務部署
一鍵發布模型為在線服務,輕松API調用,支持授權請求和模型導出

推理增強
導入文檔構建專屬知識庫,管理和編排插件,實現大模型推理增強,發布Agent應用

數據回流
推理數據在線收集回流至數據集,線上持續迭代,閉環大模型開發應用

紫東太初的主要功能

一、圖像能力

  1. 圖像描述:基于用戶上傳的圖片素材,準確理解并回答圖片識別類問題
  2. 目標檢測:支持豐富品類的目標檢測任務,能夠判定目標類型、數量和對應的位置信息
  3. 圖像檢索:基于海量的高質圖片素材庫,能為用戶搜索出關聯度高的精致圖片素材
  4. 圖像生成:針對用戶指令訴求,生成對應的精致圖片,并可以修改描述微調圖片內容
  5. 文字識別:基于圖片內容,支持多場景、多語種、高精度的文字檢測與識別服務

二、語言能力

  1. 中文問答:準確理解用戶輸入的問題語境,并能做出準確的知識性問答
  2. 文本續寫:基于用戶輸入的故事引導自動續寫豐富故事內容
  3. 文本創作:準確理解用戶輸入意圖,并生成語意連貫、邏輯通順的文本內容
  4. 標題生成:基于對文章或者長文本的理解,快速聚合生成精簡且概括的標題文案
  5. 語法分析:準確理解并分析中英文句子的語法,提醒語法錯誤并修改等
  6. 機器翻譯:幫助用戶翻譯各類型文本素材,包括中英文互譯、文言文和白話文互譯等
  7. 古詩創作:基于用戶給到的主題或引導內容即興創作詩歌、絕句等
  8. 代碼理解:理解C語言、Python、JAVA等絕大部分編程語言、算法和數據結構,快速給出所需的解答
  9. 代碼編寫:能幫助用戶快速編寫簡單的代碼片段,例如函數、類或循環等
  10. 數學計算:既能處理常規數學計算問題,也能處理如《孫子算經》上記錄的雞兔同籠數學應用問題等
  11. 邏輯推理:支持處理復雜的邏輯推理類問題,包括科學推理、常識推理、時空推理等

三、視頻能力

  1. 視頻描述:基于用戶上傳的視頻素材,準確理解并回答視頻識別、視頻描述類問題
  2. 視頻檢索:基于海量的高質視頻素材庫,能為用戶搜索出關聯度高的精致視頻素材
  3. 視頻問答:基于用戶上傳的視頻素材,準確理解并回答視頻相關的問題,同時支持上下文信息理解和多輪問答

四、音樂能力

  1. 音樂生成:通過給定的文本提示可控生成高保真的音樂,并支持即興創作多種風格類型和多種樂器演奏的音樂
  2. 音樂多模問答:基于對用戶上傳的音樂素材的理解,可完成相關多模態問答任務

五、音頻能力

  1. 音頻鑒偽:紫東太初能判斷當前音頻是真人說話還是機器合成
  2. 音頻事件分類:可檢測當前音頻中所包含的聲音事件類型,目前支持11種單一聲音事件和混合聲音事件
  3. 語音識別:可將語音快速準確識別為文字,支持手機應用語音交互、語音內容分析多個場景
  4. 語音合成:提供高度擬人、流暢自然的語音合成服務,滿足文本閱讀、語音播報等各類型場景需求

六、3D能力

  1. 3D場景描述:紫東太初2.0具備基于點云數據的3D場景理解和物體感知能力

七、信號類能力

  1. 信號識別:支持雷達信號鑒別與知識交互,可借助模型快速掌握信號基本來源及參數等

如何使用紫東太初

  1. 訪問紫東太初的官網(taichu-web.ia.ac.cn),點擊對話體驗
  2. 登錄/注冊你的賬號,申請使用登錄成功后便會自動跳轉到對話界面
  3. 輸入你的問題或者輸入斜杠選擇推薦提示指令(你也可以選擇內置的示例查看),然后點擊發送
  4. 紫東太初便會智能回答你的問題

常見問題

紫東太初如何申請試用? 訪問紫東太初的官網,在登錄界面點擊注冊,輸入“用戶名”、“昵稱”、“密碼”、“手機號”等信息提交注冊賬號申請,等待后臺審核通過后便可以免費使用體驗。 紫東太初支持上傳文件嗎? 紫東太初支持用戶上傳圖片、視頻、點云、音頻、音樂、信號的文件,并可進行針對性對話問答。 紫東太初通過生成式AI備案了嗎? 紫東太初大模型已于2023年8月首批通過《生成式人工智能服務管理暫行辦法》備案,可正式上線面向公眾提供服務。

相關網站