紫東太初是由中科院自動(dòng)化所和武漢人工智能研究院聯(lián)合推出的一個(gè)全模態(tài)大模型，它是在千億參數(shù)多模態(tài)大模型“紫東太初1.0”基礎(chǔ)上升級(jí)打造的2.0版本。紫東太初大模型支持多輪問(wèn)答、文本創(chuàng)作、圖像生成、3D理解、信號(hào)分析等全面問(wèn)答任務(wù)，具有強(qiáng)大的認(rèn)知、理解、創(chuàng)作能力，能夠帶來(lái)全新的互動(dòng)體驗(yàn)。

紫東太初的主要功能

一、圖像能力

1. 圖像描述：基于用戶(hù)上傳的圖片素材，準(zhǔn)確理解并回答圖片識(shí)別類(lèi)問(wèn)題
2. 目標(biāo)檢測(cè)：支持豐富品類(lèi)的目標(biāo)檢測(cè)任務(wù)，能夠判定目標(biāo)類(lèi)型、數(shù)量和對(duì)應(yīng)的位置信息
3. 圖像檢索：基于海量的高質(zhì)圖片素材庫(kù)，能為用戶(hù)搜索出關(guān)聯(lián)度高的精致圖片素材
4. 圖像生成：針對(duì)用戶(hù)指令訴求，生成對(duì)應(yīng)的精致圖片，并可以修改描述微調(diào)圖片內(nèi)容
5. 文字識(shí)別：基于圖片內(nèi)容，支持多場(chǎng)景、多語(yǔ)種、高精度的文字檢測(cè)與識(shí)別服務(wù)

二、語(yǔ)言能力

1. 中文問(wèn)答：準(zhǔn)確理解用戶(hù)輸入的問(wèn)題語(yǔ)境，并能做出準(zhǔn)確的知識(shí)性問(wèn)答
2. 文本續(xù)寫(xiě)：基于用戶(hù)輸入的故事引導(dǎo)自動(dòng)續(xù)寫(xiě)豐富故事內(nèi)容
3. 文本創(chuàng)作：準(zhǔn)確理解用戶(hù)輸入意圖,并生成語(yǔ)意連貫、邏輯通順的文本內(nèi)容
4. 標(biāo)題生成：基于對(duì)文章或者長(zhǎng)文本的理解，快速聚合生成精簡(jiǎn)且概括的標(biāo)題文案
5. 語(yǔ)法分析：準(zhǔn)確理解并分析中英文句子的語(yǔ)法，提醒語(yǔ)法錯(cuò)誤并修改等
6. 機(jī)器翻譯：幫助用戶(hù)翻譯各類(lèi)型文本素材，包括中英文互譯、文言文和白話文互譯等
7. 古詩(shī)創(chuàng)作：基于用戶(hù)給到的主題或引導(dǎo)內(nèi)容即興創(chuàng)作詩(shī)歌、絕句等
8. 代碼理解：理解C語(yǔ)言、Python、JAVA等絕大部分編程語(yǔ)言、算法和數(shù)據(jù)結(jié)構(gòu)，快速給出所需的解答
9. 代碼編寫(xiě)：能幫助用戶(hù)快速編寫(xiě)簡(jiǎn)單的代碼片段，例如函數(shù)、類(lèi)或循環(huán)等
10. 數(shù)學(xué)計(jì)算：既能處理常規(guī)數(shù)學(xué)計(jì)算問(wèn)題，也能處理如《孫子算經(jīng)》上記錄的雞兔同籠數(shù)學(xué)應(yīng)用問(wèn)題等
11. 邏輯推理：支持處理復(fù)雜的邏輯推理類(lèi)問(wèn)題，包括科學(xué)推理、常識(shí)推理、時(shí)空推理等

三、視頻能力

1. 視頻描述：基于用戶(hù)上傳的視頻素材，準(zhǔn)確理解并回答視頻識(shí)別、視頻描述類(lèi)問(wèn)題
2. 視頻檢索：基于海量的高質(zhì)視頻素材庫(kù)，能為用戶(hù)搜索出關(guān)聯(lián)度高的精致視頻素材
3. 視頻問(wèn)答：基于用戶(hù)上傳的視頻素材，準(zhǔn)確理解并回答視頻相關(guān)的問(wèn)題，同時(shí)支持上下文信息理解和多輪問(wèn)答

四、音樂(lè)能力

1. 音樂(lè)生成：通過(guò)給定的文本提示可控生成高保真的音樂(lè)，并支持即興創(chuàng)作多種風(fēng)格類(lèi)型和多種樂(lè)器演奏的音樂(lè)
2. 音樂(lè)多模問(wèn)答：基于對(duì)用戶(hù)上傳的音樂(lè)素材的理解，可完成相關(guān)多模態(tài)問(wèn)答任務(wù)

五、音頻能力

1. 音頻鑒偽：紫東太初能判斷當(dāng)前音頻是真人說(shuō)話還是機(jī)器合成
2. 音頻事件分類(lèi)：可檢測(cè)當(dāng)前音頻中所包含的聲音事件類(lèi)型，目前支持11種單一聲音事件和混合聲音事件
3. 語(yǔ)音識(shí)別：可將語(yǔ)音快速準(zhǔn)確識(shí)別為文字，支持手機(jī)應(yīng)用語(yǔ)音交互、語(yǔ)音內(nèi)容分析多個(gè)場(chǎng)景
4. 語(yǔ)音合成：提供高度擬人、流暢自然的語(yǔ)音合成服務(wù)，滿(mǎn)足文本閱讀、語(yǔ)音播報(bào)等各類(lèi)型場(chǎng)景需求

六、3D能力

1. 3D場(chǎng)景描述：紫東太初2.0具備基于點(diǎn)云數(shù)據(jù)的3D場(chǎng)景理解和物體感知能力

七、信號(hào)類(lèi)能力

1. 信號(hào)識(shí)別：支持雷達(dá)信號(hào)鑒別與知識(shí)交互，可借助模型快速掌握信號(hào)基本來(lái)源及參數(shù)等

如何使用紫東太初

1. 訪問(wèn)紫東太初的官網(wǎng)（taichu-web.ia.ac.cn），點(diǎn)擊對(duì)話體驗(yàn)
2. 登錄/注冊(cè)你的賬號(hào)，申請(qǐng)使用登錄成功后便會(huì)自動(dòng)跳轉(zhuǎn)到對(duì)話界面
3. 輸入你的問(wèn)題或者輸入斜杠選擇推薦提示指令（你也可以選擇內(nèi)置的示例查看），然后點(diǎn)擊發(fā)送
4. 紫東太初便會(huì)智能回答你的問(wèn)題

常見(jiàn)問(wèn)題