cover of episode 普通人就能做出好莱坞级别的场景!未来谁是主宰?| 对话游戏引擎专家 Cafe 唐军华

普通人就能做出好莱坞级别的场景!未来谁是主宰?| 对话游戏引擎专家 Cafe 唐军华

2024/10/24
logo of podcast AI炼金术

AI炼金术

AI Deep Dive AI Insights AI Chapters Transcript
People
C
Cafe 唐军华
播客主持人
播客主持人,专注于英语学习和金融话题讨论,组织了英语学习营,并深入探讨了比特币和美元的关系。
Topics
Cafe 唐军华:3D 高斯技术是近年来 3D 领域的一次重大突破,它通过利用手机拍摄的视频,结合高斯算法,可以低成本、高质量地还原逼真的 3D 场景,这将极大地降低 3D 建模的成本,并使普通人也能参与其中。这项技术并非完全依赖 AI,而是结合了传统图形学的光栅化技术,在写实物品渲染效果上远超传统图形学,并能应用于电商购物决策等领域。未来,3D 高斯技术将与传统图形引擎混合使用,而非完全替代。这项技术对数据的需求量不算特别大,算力需求也低于大模型,但需要专业显卡。3D 高斯技术目前只解决了可视化问题,空间化和物理化问题还需要大模型的补充。这项技术有望解决数字世界统一度量衡的问题,并推动数字娱乐产业的快速发展,其市场潜力甚至可能超过游戏产业。 Cafe 唐军华进一步阐述了 3D 高斯技术在降低传统扫描资产处理成本和 AI 语义识别方面的优势,以及它与传统图形学工具链的整合潜力。他认为,3D 高斯技术的发展速度将远超传统图形学,并在 3-5 年内取得显著成果。他建议,基于 3D 高斯技术的创业公司,应该选择那些传统上缺乏 3D 技术但 3D 技术能够创造价值的领域,例如电商行业。 播客主持人:本期节目主要围绕 3D 高斯技术展开讨论,并探讨了该技术对数字娱乐产业的影响。主持人首先介绍了 3D 高斯技术的背景和意义,并与 Cafe 唐军华就该技术在动画制作、游戏开发、电商等领域的应用前景进行了深入探讨。主持人还提出了关于 3D 高斯技术与大模型、空间智能技术关系等一系列问题,并与 Cafe 唐军华就这些问题进行了详细的解答。通过对话,节目展现了 3D 高斯技术的巨大潜力,以及它对未来数字娱乐产业发展方向的影响。

Deep Dive

Key Insights

为什么游戏引擎成为制作动画片的首选工具?

游戏引擎被广泛用于制作动画片,主要是因为它们在创建3D资产和动画方面更为高效和方便。传统动画制作是一个体力活,需要大量的人力和时间,而游戏引擎可以大大减少这些成本和时间。此外,游戏引擎的实时渲染能力也使得动画制作更加灵活和快速。

数字娱乐产业的门槛和可能踩到的‘坑’是什么?

数字娱乐产业的最大门槛是成本。制作高质量的3D内容需要大量的资金,尤其是在游戏和影视产业。此外,找到合适的、有经验的3D程序员和制作团队也非常困难,这进一步增加了成本。如果产品无法在商业化上取得成功,这些高成本将成为巨大的负担。

3D高斯技术的核心特征是什么?

3D高斯技术的核心特征是显著降低成本,只需用手机录制视频,就能还原出价值数万甚至数十万元的场景。它允许普通人制作高质量的3D模型,帮助做出电商购物决策,且不需要人工标注模型的不同模块。3D高斯通过AI语义识别直接对模型进行拆分,大大提高了效率。

3D高斯技术如何帮助传统艺术生进入数字化世界?

3D高斯技术通过AI工具化,使传统艺术生可以更容易地进入数字化世界进行创作。例如,艺术家可以通过自然语言命令生成3D资产,然后通过AI赋予这些资产物理属性和游戏性。这不仅降低了技术门槛,还为艺术家提供了新的创作工具,使他们能够将天马行空的想法转化为现实。

3D高斯技术与大语言模型之间的关系是什么?

3D高斯技术主要解决可视化问题,而大语言模型则解决物理化和空间化问题。3D高斯在渲染高质量3D模型时,需要大语言模型来填补物理特性和空间特性的空白。例如,3D高斯可以生成一个玻璃杯的视觉效果,但大语言模型可以识别出玻璃材质并模拟其破碎的行为。

3D高斯技术在电商领域的应用前景如何?

3D高斯技术在电商领域的应用前景非常广阔。通过生成高质量的3D模型,消费者可以360度查看商品,提高购物体验和决策准确性。此外,3D高斯技术可以显著降低成本,使得更多商家能够采用3D展示方式,从而提升竞争力。

3D高斯技术的发展前景如何?

3D高斯技术的发展前景非常乐观。预计在未来3到5年内,3D高斯将迅速发展,成为数字娱乐和电商等领域的核心技术。它有望解决传统3D资产的标准化问题,实现跨平台的通用性,并大幅降低制作成本,推动整个产业的快速发展。

Chapters
本节探讨了游戏引擎在数字娱乐产业中的应用,特别是动画制作领域。嘉宾指出游戏引擎因其效率和可控性,成为主流动画制作工具,并分析了Vigo等新兴产品在商业化道路上可能面临的挑战。
  • 游戏引擎成为动画片制作主流工具
  • Vigo等新兴产品商业化挑战
  • 数字娱乐产品解决方案的重要性

Shownotes Transcript

欢迎大家来到「AI 炼金术」,我们今天请来的嘉宾是Cafe 唐军华,他是我在 3D 方面的老师。 我关注到 Cafe 同学是在一个 IT 的场子,就是超声波的线下活动。就在听他讲 3D 的世界,说我们可以用 3D 的游戏引擎,就可以把一个世界给搭出来。balabala~,听着就觉得非常的神奇。因为我最近关注 3D 和 diffusion,听到他讲这些就发现说,原来还有一个强控制,就是所谓的可控制性的视频生成领域,其实不就是游戏嘛!然后就听他讲着讲着就发现说,游戏行业好像这方面已经积累了十几二十年的经验。已经有大量的资产,大量的算法,人才,甚至于已有的数据资产已经在那里了。所以,觉得这边是一个宝藏啊!虽然Cafe自己一直说要低调,但他应该算是国内做游戏引擎数一数二的人了,就觉得一定要拉他跟大家做下分享。 嘉宾:** Cafe 唐军华 | 游戏开发,游戏图形引擎开发专家 播客时间线:** **Part 1 **游戏引擎在数字娱乐产业中的应用与发展 04:29 从游戏引擎角度反向去做视频生成是否会更有信息、更容易? 06:43 现在大多数的动画片都是用游戏引擎来做的,这是为什么呢? 10:04 数字娱乐产业的门槛和可能会踩到的“坑”是什么?

  • 游戏和影视产业“ 成本 ”是最大的门槛 **Part 2 **3D高斯 --3D 领域的重大突破 17:19 3D 高斯的核心特征:
  • 节省了超级多的成本。只要用手机录出视频,随便一个能摄影的好的人,就能够去还原出一个价值10万20万甚至50万的场景。
  • 让普通人可以做到小物件或是大场景的还原,帮助普通人做出电商购物决策
  • 不需要人工标识模型的不同模块,直接在 3D高斯里做 AI 语义识别,就可以将模型进行拆分 24:29 简单直白的理解, 3D 高斯是什么 ? 27:15 空间智能与3D高斯技术之间的关系? 30:15 只要有足够多数量和多样性的图片数据,完全就不需要 3D 了?
  • transformer实现了数字世界的统一的度量衡的单位,统一了度量衡之后的世界才能告诉的发展 36:38 3D 高斯技术的发展与应用
  • 高斯技术本质并不是一个完全用 AI大模型的去做的渲染模式。它还是用了光栅化,也就是传统图形学里的方式实现
  • 3D 高斯跟传统的图形引擎在未来几年里,会混合式渲染,而不是替代式的发展
  • 高斯算法可以进入到传统的工具链中使用,但目前整个产业还没有准备好 47:56 3D 高斯与大语言模型之间的关系
  • 3D高斯相对于大模型来说,算力的要求没有那么高,比如是千级和万级别的差别,但也需要专业显卡
  • 3D高斯只解决可视化的问题,并不解决物理化空间化的问题
  • 3D高斯的工作中是需要大模型能力的填补和完善的 55:30 传统艺术生如何进入数字化世界去创作以及 AI 在游戏开发中潜在的作用 正在招人** 简历投递:[email protected] 产品经理 & 设计师 海外 toC 的 AI 产品,需有移动互联网产品经验 & 日常会使用多种 AI 工具,较深海外背景和经验加分。 欢迎订阅「AI 炼金术」的播客,以及同名公众号、视频号** 我们关注新一代 AI 技术浪潮带来的行业新变化和创业新机会,追踪 AI 技术革新如何重新定义行业界限和商业模式。我们邀请、访谈那些正在用AI炼金术改变世界的先行者。通过他们分享的经验、挑战,我们一起见证这些变化,探讨这些变化背后的深层逻辑,寻找并实践新的商业模式和生活方式。 商务合作:公众号 「AI炼金术 」菜单栏中【商务】获取联系方式 相关 AI 实战课程** 任鑫《AI新商业机会洞察22讲》 https://tools.hundun.cn/h5Bin/wxpay/dhy-selected-course-pay.html?page_type=&package_id=509&user_package_id=&channel=appshare&ambass_id=fabe90b3548513a654965aef6a1e65eb&channel_id=181&pid=TMI6&sale_channel= 徐文浩《AI 大模型之美》 xuwenhao.com BGM**:** 片头:Shortwire - Reconfig 片尾:万万小宇宙 - A.T.O.M(神游)