cover of episode 从图形学到 AI 生成 3D:我们离 3D 版 Midjourney 还有多远? | 对谈 Meshy.AI 创始人渊鸣

从图形学到 AI 生成 3D:我们离 3D 版 Midjourney 还有多远? | 对谈 Meshy.AI 创始人渊鸣

2023/12/16
logo of podcast 42章经

42章经

AI Deep Dive AI Chapters Transcript
People
曲凯
专注于推动AI应用创业领域的发展和分享行业见解的“42章经”创始人。
胡渊鸣
Topics
曲凯:探讨了图形学的发展历程,从真实感渲染到仿真,再到与AI的结合,并对AI生成3D技术的市场前景和挑战进行了深入分析。他提出了许多关键问题,例如AI生成3D的多种表达方式(点云、体素、神经辐射场、网格)的优劣,以及AI生成视频和AI生成3D哪个技术会更快发展等。 胡渊鸣:详细解释了图形学的概念、渲染的原理以及3D模型的多种表达方式。他深入探讨了AI生成3D的三个主要任务:文字生成贴图、文字生成3D模型和图像生成3D模型。他还分析了AI生成3D技术面临的挑战,例如数据匮乏、模型质量、可控性、速度等问题,并对未来发展趋势和市场需求进行了预测。他分享了自己从科研转向创业的经历和感悟,强调了市场需求的重要性以及科研人员在创业过程中需要克服的挑战。 曲凯:对AI生成3D技术的市场前景和挑战进行了深入分析,并与胡渊鸣就AI生成视频和AI生成3D哪个技术会更快发展展开了讨论。他关注了3D技术发展中可能跳过的步骤,以及3D技术在消费级市场的普及问题。 胡渊鸣:详细解释了AI生成3D技术的三个主要任务,并对每个任务的应用场景和技术难点进行了深入分析。他还分析了3D数据集规模远小于2D数据集的问题,以及3D资产市场规模和缺乏UGC内容的问题。他分享了自己从科研转向创业的经历和感悟,强调了市场需求的重要性以及科研人员在创业过程中需要克服的挑战,并对未来发展趋势和市场需求进行了预测。

Deep Dive

Chapters
讨论了图形学的定义、历史发展及其与AI的结合,解释了图形学如何从真实感渲染发展到与AI结合的现状。
  • 图形学最初关注真实感渲染,后来扩展到仿真和AI结合
  • 图形学涉及硬件和软件两部分,包括渲染、仿真和游戏引擎

Shownotes Transcript

大概 2020 年初的时候,胡渊鸣在知乎上发表过一个爆文,叫《99 行代码的冰雪奇缘》,那个时候他还在 MIT 读图形学的博士,在这篇文章下,第一名的评论是这么说的:“太巨了,图形+系统+编译,真的是创世的快乐”。

在这个之后他在图形学领域创业了几年,最近刚发布了新产品 Meshy.ai,一个 AI 生成 3D 的项目,这也是今年 AI 生成下最热门的方向之一。AI 生成文字、图片、视频、3D,基本是生成类方向的四块基石,前三者很多人大概都有些概念或者看过一些实际的产出,但相信还有不少人对 AI3D 领域很陌生,所以这期播客我就请来了图形学的专家渊鸣来一起聊聊这个领域的发展和 knowhow。

在这期播客中,我们理清了很多基础的概念,比如到底什么是图形学、如何理解渲染这件事、实现 3D 的一些基础技术路径等等,我们希望每个人都能通过这期播客了解到 AI3D 领域的基础知识,也能更好的理解图形学和未来世界的可能性。此外,我们也聊到了一些他作为科研 PhD 创业的心得体会等。

人类博物馆】

**导游:**曲凯,42章经创始人

**十号珍藏:**胡渊鸣,Meshy.AI 创始人,清华大学姚班本科,MIT 计算机科学博士

时光机】

  • 1:42 当我们聊到图形学,我们到底在聊什么?

  • 12:36 3D 数据的不同表达方式

    • 12:44 点云
    • 12:53 体素
    • 14:23 NeRF
    • 15:02 高斯散射
    • 16:00 Mesh
  • 21:07 2D+时间维度=视频,2D+空间维度=3D

  • 22:25 AI 生成 3D 要解决的三类任务

    • 22:32 文字生成贴图
    • 22:56 文字生成 3D
    • 23:51 图像生成 3D
  • 29:49 当 VR 设备成为了下一代 iPhone,3D 资产会成为日常生活的重要组成

  • 32:08 AI 生成 3D 的市场需求

  • 33:29 我们距离一个 3D 版的 Midjourney 还有多远?

  • 34:50 AI 生成视频与生成 3D,哪个会更快一些?

  • 38:48 创业最深的感悟:Why 是比 How 更重要的事情

  • 39:51 忘记自己从一个科学家角度对这个世界的理解

  • 43:11 上帝说:要有光

The gang that made this happen】

  • 制作人:Celia
  • 剪辑:思娜
  • 片头 bgm:Mondo Bongo - Joe Strummer & The Mescaleros

【Reference】

最后,我们的 AI 私董会也在持续报名中,目前已经聚集了一批市场上最好的 AI 创始人,欢迎点击链接)报名(里面也有目前已加入的成员名单,可点击查看)

渊鸣 (左),我,又在我家沙发