團(tuán)結(jié)AIGraph

在 Tuanjie 1.7.3中，我們?nèi)峦瞥?strong>團(tuán)結(jié)AIGraph—— 一個(gè)圖形化、節(jié)點(diǎn)式的 AI 工作流系統(tǒng)，團(tuán)結(jié)引擎自研的一套 AI 工作流系統(tǒng)，具備模塊化、可視化、低代碼等優(yōu)勢(shì)。團(tuán)結(jié)引擎正在與國(guó)內(nèi)外的第三方大模型展開(kāi)合作，將第三方 AIGC 能力深度集成 Tuanjie AI Graph，形成標(biāo)準(zhǔn)化的節(jié)點(diǎn)組件。開(kāi)發(fā)者將無(wú)需重復(fù)接入多個(gè)模型或服務(wù)端口，即可在引擎環(huán)境中直接調(diào)用第三方 AIGC 大模型的 AI 生成能力，實(shí)現(xiàn)從 2D 圖像/文本輸入到 3D 模型、紋理、綁定參數(shù)的端到端自動(dòng)化生產(chǎn)。

關(guān)鍵特性介紹
1.引擎內(nèi)多入口導(dǎo)入

• 第一個(gè)是從 Editor 中直達(dá) Graph Template，Window -> Tuanjie AI -> Graph Template

• 此外，AI Graph 集成多模態(tài) API，覆蓋文生圖、圖生 3D、角色生成、自動(dòng)綁定、動(dòng)作驅(qū)動(dòng)等完整鏈路，通過(guò)與Sprite、Mesh、Material、Animation、Particle System等核心組件的深度結(jié)合，開(kāi)發(fā)者無(wú)需離開(kāi) Inspector 面板，點(diǎn)擊“AI Generate”就能一鍵完成 AI 生成并預(yù)覽，不滿(mǎn)意還可以重新再次生成，最終將滿(mǎn)意的資產(chǎn)一鍵導(dǎo)入項(xiàng)目，實(shí)現(xiàn)一站式AI輔助工作流。

2.模版化工作流

• 模板化工作流是 AI Graph 的核心亮點(diǎn)之一。模版涵蓋范圍極廣，當(dāng)前，無(wú)論是從文本自動(dòng)生成 3D 道具與角色，還是基于圖像完成風(fēng)格轉(zhuǎn)換、PBR 材質(zhì)生成，甚至是角色及動(dòng)畫(huà)生成，開(kāi)發(fā)者都能通過(guò)內(nèi)置的標(biāo)準(zhǔn)化模板快速構(gòu)建完整的 AI 生產(chǎn)鏈路。同時(shí)，模板會(huì)自動(dòng)推薦給對(duì)應(yīng)的引擎組件（SpriteRenderer、Material、MeshRenderer、AnimationClip 等），并通過(guò)AI Generate一鍵入口觸發(fā)，幫助用戶(hù)在熟悉的 Inspector 環(huán)境下完成創(chuàng)作，而無(wú)需頻繁跳轉(zhuǎn)外部工具。未來(lái)，AI Graph 也將接入更多 API 接口，提供更廣范圍的資產(chǎn)生成。

Graph Template

3.節(jié)點(diǎn)可視化編輯

• 可視化節(jié)點(diǎn)編輯是AI Graph的主要工作模式，方便快捷，易于上手。選擇 Template 模版中的對(duì)應(yīng)模版，即可進(jìn)入 AI 生成節(jié)點(diǎn)化編輯界面，可以基于已有的節(jié)點(diǎn)直接進(jìn)行圖片、模型、動(dòng)畫(huà)等資產(chǎn)的生成和編輯，也可以根據(jù)需求新建新節(jié)點(diǎn)進(jìn)行生成和編輯。

AI 模型

團(tuán)結(jié) AI Graph 目具備第三方大模型 API 調(diào)用能力，您無(wú)需重復(fù)接入多個(gè)模型或服務(wù)端口，即可在引擎環(huán)境中直接調(diào)用第三方 AIGC 大模型的 AI 生成能力。目前支持的 AI 大模型包括騰訊混元和 Tripo - Vast，此外 Hyper3D - Rodin 節(jié)點(diǎn)也在籌備中。

其中，騰訊混元節(jié)點(diǎn)基于騰訊混元大模型，涵蓋圖像生成、角色建模、姿態(tài)處理與動(dòng)畫(huà)生成等能力，將騰訊混元的最新模型接入團(tuán)結(jié) AI，包括文生圖、文生 Sprite、圖片上色、圖片背景去除/替換、圖生模型、3D 自動(dòng)綁骨、圖生材質(zhì)等 21 個(gè) API，適合需要快速完成從 2D 輸入到 3D 輸出的場(chǎng)景，比如角色原型設(shè)計(jì)、材質(zhì)替換或動(dòng)畫(huà)預(yù)演。

快速上手

團(tuán)結(jié) AI Graph 以包的形式發(fā)布，通過(guò) Package Manager -> Tuanjie Registry -> Packages -> Tuanjie AI Graph，點(diǎn)擊 install 即可安裝并使用團(tuán)結(jié) AI Graph；

團(tuán)結(jié)AIAssistant

除全新推出的團(tuán)結(jié)AIGraph外，在 Tuanjie 1.7 中，原 Muse Chat AI 模塊全新升級(jí)，改名團(tuán)結(jié) AI Assistant，更新內(nèi)容包括：優(yōu)化了界面 UI/用戶(hù)交互邏輯和 Markdown 文本內(nèi)容支持；新增 Agent 工具列表管理功能和自定義 Agent 工具支持；以及后端 AI 模型更新。

新界面/功能介紹

更新后的界面如下所示：

基礎(chǔ)的知識(shí)問(wèn)答和代碼助手功能與舊版保持一致：

知識(shí)問(wèn)答 & 代碼助手 Demo

作為Agent模式新增的一項(xiàng)重要功能，用戶(hù)可以按照項(xiàng)目需要，基于

IAgentToolExecutor

https://docs.unity.cn/cn/tuanjiemanual/Manual/TuanjieAIAssistant.html

在下面的示例中，我們將地形生成的功能用自定義 Agent 工具進(jìn)行了封裝，從而拓展了團(tuán)結(jié) AI Assistant的能力邊界：

Agent模式：自定義工具 - 地形生成Demo

未來(lái)展望

多智能體支持：為了解決團(tuán)結(jié)引擎在使用過(guò)程中面臨的復(fù)雜與高難度任務(wù)，我們希望團(tuán)結(jié)AIAssistant能夠通過(guò)調(diào)用其他引擎模塊的專(zhuān)家智能體，實(shí)現(xiàn)任務(wù)的分工協(xié)作與智能協(xié)同處理，從而提升整體的開(kāi)發(fā)效率與智能化水平。

目前，我們已嘗試實(shí)現(xiàn)ShaderGraph Agent—— 一個(gè)專(zhuān)注于Shader Graph領(lǐng)域的專(zhuān)家型智能體，可高效處理與 Shader Graph 相關(guān)的各類(lèi)任務(wù)，包括：

• 節(jié)點(diǎn)理解與問(wèn)答： 可針對(duì)指定節(jié)點(diǎn)進(jìn)行功能解析與使用指導(dǎo)

• 節(jié)點(diǎn)與函數(shù)生成： 自動(dòng)生成 Shader Graph 節(jié)點(diǎn)及 Custom Function

• 結(jié)構(gòu)化組裝： 根據(jù)需求自動(dòng)配置輸入輸出參數(shù)，并生成合適節(jié)點(diǎn)連接

• 智能協(xié)作： 處理團(tuán)結(jié)AI Assistant 轉(zhuǎn)交的 Shader Graph 相關(guān)請(qǐng)求，作為專(zhuān)家實(shí)現(xiàn)任務(wù)分派與執(zhí)行閉環(huán)

以下示例展示了如何通過(guò)ShaderGraph Agent協(xié)助團(tuán)結(jié)AIAssistant實(shí)現(xiàn)水體渲染效果的制作流程：

Agent模式：多智能體支持 - ShaderGraph Agent水體渲染Demo

此外，為進(jìn)一步提升團(tuán)結(jié) AI Assistant 的智能化水平與生態(tài)融合能力，目前計(jì)劃圍繞三個(gè)核心方向持續(xù)優(yōu)化：一是深度融合團(tuán)結(jié)引擎生態(tài)，通過(guò)強(qiáng)化底層集成與工具兼容，豐富附件類(lèi)型支持；二是智能化任務(wù)理解與規(guī)劃，優(yōu)化 Agent 模式以提升任務(wù)拆解與用戶(hù)意圖理解能力；三是開(kāi)放與生態(tài)建設(shè)，通過(guò) MCP 支持與開(kāi)源協(xié)作，推動(dòng)多元、開(kāi)放、活躍的生態(tài)體系構(gòu)建。

更多使用指南

• 團(tuán)結(jié)AI用戶(hù)手冊(cè)：

https://docs.unity.cn/cn/tuanjiemanual/Manual/TuanjieAI.html

• 團(tuán)結(jié)AI Graph Package用戶(hù)手冊(cè)：

https://docs.unity.cn/cn/Packages-cn/cn.tuanjie.ai.graph@1.0/manual/

Unity 官方微信

第一時(shí)間了解Unity引擎動(dòng)向，學(xué)習(xí)進(jìn)階開(kāi)發(fā)技能

每一個(gè)“點(diǎn)贊”、“在看”，都是我們前進(jìn)的動(dòng)力