團結(jié)AIGraph

在 Tuanjie 1.7.3中，我們?nèi)峦瞥?strong>團結(jié)AIGraph—— 一個圖形化、節(jié)點式的 AI 工作流系統(tǒng)，團結(jié)引擎自研的一套 AI 工作流系統(tǒng)，具備模塊化、可視化、低代碼等優(yōu)勢。團結(jié)引擎正在與國內(nèi)外的第三方大模型展開合作，將第三方 AIGC 能力深度集成 Tuanjie AI Graph，形成標(biāo)準(zhǔn)化的節(jié)點組件。開發(fā)者將無需重復(fù)接入多個模型或服務(wù)端口，即可在引擎環(huán)境中直接調(diào)用第三方 AIGC 大模型的 AI 生成能力，實現(xiàn)從 2D 圖像/文本輸入到 3D 模型、紋理、綁定參數(shù)的端到端自動化生產(chǎn)。

關(guān)鍵特性介紹
1.引擎內(nèi)多入口導(dǎo)入

• 第一個是從 Editor 中直達 Graph Template，Window -> Tuanjie AI -> Graph Template

• 此外，AI Graph 集成多模態(tài) API，覆蓋文生圖、圖生 3D、角色生成、自動綁定、動作驅(qū)動等完整鏈路，通過與Sprite、Mesh、Material、Animation、Particle System等核心組件的深度結(jié)合，開發(fā)者無需離開 Inspector 面板，點擊“AI Generate”就能一鍵完成 AI 生成并預(yù)覽，不滿意還可以重新再次生成，最終將滿意的資產(chǎn)一鍵導(dǎo)入項目，實現(xiàn)一站式AI輔助工作流。

2.模版化工作流

• 模板化工作流是 AI Graph 的核心亮點之一。模版涵蓋范圍極廣，當(dāng)前，無論是從文本自動生成 3D 道具與角色，還是基于圖像完成風(fēng)格轉(zhuǎn)換、PBR 材質(zhì)生成，甚至是角色及動畫生成，開發(fā)者都能通過內(nèi)置的標(biāo)準(zhǔn)化模板快速構(gòu)建完整的 AI 生產(chǎn)鏈路。同時，模板會自動推薦給對應(yīng)的引擎組件（SpriteRenderer、Material、MeshRenderer、AnimationClip 等），并通過AI Generate一鍵入口觸發(fā)，幫助用戶在熟悉的 Inspector 環(huán)境下完成創(chuàng)作，而無需頻繁跳轉(zhuǎn)外部工具。未來，AI Graph 也將接入更多 API 接口，提供更廣范圍的資產(chǎn)生成。

Graph Template

3.節(jié)點可視化編輯

• 可視化節(jié)點編輯是AI Graph的主要工作模式，方便快捷，易于上手。選擇 Template 模版中的對應(yīng)模版，即可進入 AI 生成節(jié)點化編輯界面，可以基于已有的節(jié)點直接進行圖片、模型、動畫等資產(chǎn)的生成和編輯，也可以根據(jù)需求新建新節(jié)點進行生成和編輯。

AI 模型

團結(jié) AI Graph 目具備第三方大模型 API 調(diào)用能力，您無需重復(fù)接入多個模型或服務(wù)端口，即可在引擎環(huán)境中直接調(diào)用第三方 AIGC 大模型的 AI 生成能力。目前支持的 AI 大模型包括騰訊混元和 Tripo - Vast，此外 Hyper3D - Rodin 節(jié)點也在籌備中。

其中，騰訊混元節(jié)點基于騰訊混元大模型，涵蓋圖像生成、角色建模、姿態(tài)處理與動畫生成等能力，將騰訊混元的最新模型接入團結(jié) AI，包括文生圖、文生 Sprite、圖片上色、圖片背景去除/替換、圖生模型、3D 自動綁骨、圖生材質(zhì)等 21 個 API，適合需要快速完成從 2D 輸入到 3D 輸出的場景，比如角色原型設(shè)計、材質(zhì)替換或動畫預(yù)演。

快速上手

團結(jié) AI Graph 以包的形式發(fā)布，通過 Package Manager -> Tuanjie Registry -> Packages -> Tuanjie AI Graph，點擊 install 即可安裝并使用團結(jié) AI Graph；

團結(jié)AIAssistant

除全新推出的團結(jié)AIGraph外，在 Tuanjie 1.7 中，原 Muse Chat AI 模塊全新升級，改名團結(jié) AI Assistant，更新內(nèi)容包括：優(yōu)化了界面 UI/用戶交互邏輯和 Markdown 文本內(nèi)容支持；新增 Agent 工具列表管理功能和自定義 Agent 工具支持；以及后端 AI 模型更新。

新界面/功能介紹

更新后的界面如下所示：

基礎(chǔ)的知識問答和代碼助手功能與舊版保持一致：

知識問答 & 代碼助手 Demo

作為Agent模式新增的一項重要功能，用戶可以按照項目需要，基于

IAgentToolExecutor

https://docs.unity.cn/cn/tuanjiemanual/Manual/TuanjieAIAssistant.html

在下面的示例中，我們將地形生成的功能用自定義 Agent 工具進行了封裝，從而拓展了團結(jié) AI Assistant的能力邊界：

Agent模式：自定義工具 - 地形生成Demo

未來展望

多智能體支持：為了解決團結(jié)引擎在使用過程中面臨的復(fù)雜與高難度任務(wù)，我們希望團結(jié)AIAssistant能夠通過調(diào)用其他引擎模塊的專家智能體，實現(xiàn)任務(wù)的分工協(xié)作與智能協(xié)同處理，從而提升整體的開發(fā)效率與智能化水平。

目前，我們已嘗試實現(xiàn)ShaderGraph Agent—— 一個專注于Shader Graph領(lǐng)域的專家型智能體，可高效處理與 Shader Graph 相關(guān)的各類任務(wù)，包括：

• 節(jié)點理解與問答： 可針對指定節(jié)點進行功能解析與使用指導(dǎo)

• 節(jié)點與函數(shù)生成： 自動生成 Shader Graph 節(jié)點及 Custom Function

• 結(jié)構(gòu)化組裝： 根據(jù)需求自動配置輸入輸出參數(shù)，并生成合適節(jié)點連接

• 智能協(xié)作： 處理團結(jié)AI Assistant 轉(zhuǎn)交的 Shader Graph 相關(guān)請求，作為專家實現(xiàn)任務(wù)分派與執(zhí)行閉環(huán)

以下示例展示了如何通過ShaderGraph Agent協(xié)助團結(jié)AIAssistant實現(xiàn)水體渲染效果的制作流程：

Agent模式：多智能體支持 - ShaderGraph Agent水體渲染Demo

此外，為進一步提升團結(jié) AI Assistant 的智能化水平與生態(tài)融合能力，目前計劃圍繞三個核心方向持續(xù)優(yōu)化：一是深度融合團結(jié)引擎生態(tài)，通過強化底層集成與工具兼容，豐富附件類型支持；二是智能化任務(wù)理解與規(guī)劃，優(yōu)化 Agent 模式以提升任務(wù)拆解與用戶意圖理解能力；三是開放與生態(tài)建設(shè)，通過 MCP 支持與開源協(xié)作，推動多元、開放、活躍的生態(tài)體系構(gòu)建。

更多使用指南

• 團結(jié)AI用戶手冊：

https://docs.unity.cn/cn/tuanjiemanual/Manual/TuanjieAI.html

• 團結(jié)AI Graph Package用戶手冊：

https://docs.unity.cn/cn/Packages-cn/cn.tuanjie.ai.graph@1.0/manual/

Unity 官方微信

第一時間了解Unity引擎動向，學(xué)習(xí)進階開發(fā)技能

每一個“點贊”、“在看”，都是我們前進的動力