Galacean:3D 互动的 AI 开发新体验
如果无法正常显示,请先停止浏览器的去广告插件。
1. Galacean:3D 互动的 AI 开发新体验
陆庄 · 蚂蚁集团 平台体验技术部
蚂蚁终端体验科技大会
2.
3. 想做 3D 互动应用?门槛比你想象的高
4. 效果不错,但是
ROI呢?
老板不敢投
找不到懂 3D 交
互的美术
创意,不该被成本扼杀
产品推不动
高昂的成本,常常让一个好创意在萌芽阶段就被放弃。
业务都开发不完
还要申请预算找
没时间学 3D 知识
供应商建模
美术放不开
研发扛不住
5. 能否用AI 解决刚才的困扰
6. 一次真实的尝试
7. 输入:
输出:
✅ 是火焰
✅ 有烟雾
✅ 效果在能接受的范围内
但是:
❓同样的 prompt 微调后效果不同了?
❓设计不满意怎么办,细节如何调整?
❓如何集成到 3D项目中?
第一次
第二次
8. 通用 Agent 无法满足 3D 开发需求
9. 四个问题 → 生成 ≠ 生产
01 🌀 不专精02 🎲 不可控03 🗣→❓ 不精确04 🔧 不好集成
通用 Agent产品美术研发
“我说了只改火苗的颜色就可
以了!😡”“我要项目资产不要 HTML代
码”
“设计不出好的粒子效果”
“你输出的内容不符合我之
前和你说的规则啊”
10. 如何用 AI 做生产级的 3D 项目?
11. 我们的答案:从 生成 到 共创
让 AI 从黑盒魔法变成可协作的伙伴
12. 01 🌀 不专精
02 🎲 不可控
03 🗣→❓ 不精确
04 🔧 不好集成
领域专家 Agent
面向子领域,构建专用 Agent
创意结构化
把模糊需求变成可执行清单
双向协作
AI 生成后可以人工精修
一站式创作
生成内容是 3D 项目内的资产格式
13. 1. 领域专家 Agent
14. 项目需求
发起项目创作工作流
策划Agent
一个跑酷游戏
开发Agent
意图识别路由到指定 Agent
原子需求
生成一个粒子
生成一个模型
调整下相机的位置
粒子Agent
生模Agent
编辑器操作工具集
动画Agent
15.
16.
17. 2. 结构化
18. 策划图 - Spec Creation
项目需求
需求理解与解析
核心玩法设计
策划Agent
系统设计
19.
20. 3. 双向协作
21. 3.1 意图模式
22.
23. 3.2 专业模式
24.
25. 3.3 同步能力
26. 更新
玩法
计
设
统
系
取
读
蓝图数据
的修
改
态
状
新
最
目
开发Agent
项
取
读
场景数据
资产数据
树
核心
层级
开发
粒子
策划
修改
玩法
…
修改
最小
设计
最小
读取
系统
修改
策划Agent
ContextStore
美术
调用Agent及工具实现
27.
28. 为什么做两种模式?
29. 我们希望服务更多的用户
刚入门用户
痛点:不懂专业
具,怕复杂
解决方案:纯对话,零学习成本
创意型用户
痛点:有想法但不会编码/建模
蓝图
解决方案:使
具,迭代项
专业创作者
,
痛点:某些领域不擅
如研发不擅
使用方式:两种模式混合使
美术
,随时切换
让每个人用最舒服的方式创作
30. 4. 一站式创作
31.
32. Galacean AI 工作流
意图输入
项目级需求
原子级需求
发起项目创作工作流
Agent 执行
意图识别路由到指定 Agent
生成/更新
创建/更新
人工编辑
编辑器资产
同步
数据驱动更新
编辑器视图
ContextStore
获取信息
33. 业务场景
34. Galacean2.0:AI-Native 3D 内容生成服务
预计 1 月发布
35. 我们的愿景:
“让 3D 创意不再被技术门槛阻挡”
https://github.com/galacean/engine
扫码加入官方交流群