新闻中心

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

2023-06-20
浏览次数:
返回列表

谁说生成图像、视频一定要靠ai?

普林斯顿大学新出的神器,可无限生成逼真3D世界,特别强调“No AI”

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

浅浅感受一下这个效果:


零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作



零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

不要以为生成的只是一段视频,其实背后是一套完整的3D资产,基于建模软件Blender打造。

此时所有blender用户一起跟我:啊?

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

如此一来,我们就能用参数来控制细节:

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

或者拿到相应的光流图、3D场景光流图、深度图、全景分割图等等,轻松hold住各种CV任务。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

最最重要的是,它还免费、开源

妈妈真的再也不用担心我找不到高质量的3D数据投喂AI了……

100%基于随机数学的3D数据生成器

尽管AI发展迅猛,但目前CV领域的许多任务仍然缺乏高质量的数据,3D尤甚。

一个解决办法是用合成数据。事实证明,在这类数据上训练的模型在零样本的真实图像上也可以表现得很好。

但问题是,现有的大多数免费3D合成数据工具基本局限于单一场景:要么是自动驾驶相关,要么就是那种位于室内环境中的人造物体。

因此,为了扩大覆盖范围,尤其是真实世界里的自然场景,作者基于Blender打造了这个基于随机数学规则无限生成各种场景的Infinigen。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

Infinigen主要利用Blender的“基元”(或原语),设计了一个程序规则库,通过编码完成真实自然场景各个对象的生成。

论文主要介绍了Infinigen的程序体系,包括:

  • Node Transpiler(节点转换器),可以自动将Blender节点图转化为Python代码,方便非程序员用户使用Infinigen。

如下图所示,它生成的代码更通用,既允许我们随机化输入参数,也允许随机化图结构。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

  • Generator Subsystems(生成器子系统),Infinigen的生成器是是一个个基于概率的程序,每个程序专门用于生成一个子对象(比如山脉或鱼类)。每个对象都有一组高级参数(比如山的总高度),用户可以使用Python API来调整这些参数,以实现对数据生成的细粒度控制。
  • Material Generators(材料生成器),一共有50个,每个都由一个能指定颜色和反射率的随机着色器和一个生成相应精细几何细节的局部几何生成器组成。

如下图由所示,它能保证非常真实的几何细节。

Pippit AI Pippit AI

CapCut推出的AI创意内容生成工具

Pippit AI 133 查看详情 Pippit AI

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作


  • Terrain Generators(地形生成器),如下图所示,该生成器可以通过反复挤压生成巨石,使用Blender的内置插件生成小石块。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

并帮助Infinigen通过使用FLIP模拟动力学流体,使用Blender的粒子系统模拟天气。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

  • Plants & Underwater Object Generators(植物和水下物体发生器),包括使用用随机游走等算法对树木生长进行建模,从而形成一个覆盖各种树木、灌木甚至仙人掌的3D世界。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

又或者是使用差异化生长、拉普拉斯生长和反应扩散制造各种珊瑚、使用几何节点图生成树叶、花朵、海藻、海带、软体动物和水母。

还有各种子生成器(比如生物生成器)就不一一介绍了。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

除了这些,Infinigen还包括一个图像渲染与Ground Truth提取程序,主要用于生成下图这些类型的图像。

其中对于前者,系统使用了Blender基于自然规律的路径跟踪渲染器Cycles来渲染图像。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

作者介绍,虽然使用Blender开发了Infinigen的程序规则,不过程序生成的很大一部分是在Blender之外完成的。

另外,他们也表示,构建Infinigen是一项极大量的软件工程,光是它代码库的主分支就囊括了40485行代码

最后,Infinigen在2个Intel Xeon Silver 4114 @ 2.20GHz CPU和1个NVidia GPU上进行了基准测试,生成一对1080p图像的时间(wall time)3.5小时

下表是它与现有合成数据集或生成器的比较。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

作者表示,从中可以看出,Infinigen最大的优点就是不需要任何外部参考资源库就能程序化地生成无限的自然3D数据,别的都不行。

团队介绍

Infinigen将在本周三的CVPR会议上进行Poster展示。

它的作者全部来自普林斯顿大学Vision & Learning Lab。

三位共同一作,其中一位叫Ma Zeyu,普林斯顿大学博士三年级在读,2025年本科毕业于清华大学电子工程专业。

通讯作者为普林斯顿大学计算机科学系副教授邓嘉

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

目前,Infinigen的代码已经上线GitHub,短短两天已有850个标星。

零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作

论文地址:
https://www.php.cn/link/d9812f756d0df06c7381945d2e2c7d4b项目主页:
https://www.php.cn/link/ca886eb9edb61a42256192745c72cd79
GitHub地址:
https://www.php.cn/link/a1cb608a30fc2883eed0831dcf25f260

以上就是零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作的详细内容,更多请关注其它相关文章!


# 场景  # 如何有效微信营销推广  # 品牌站外seo推广公司  # 软件优化网站有哪些类型  # 广州市seo推广费用  # 美业网站推广选择  # pr社seo综合  # 下载使用  # 别再  # 高质量  # 站上  # 如下图  # 开源  # 所示  # 腾讯  # 火了  # 普林斯顿  # 随机数学  # AI  # seo上海公司哪家好  # seo结构的作用  # 济南营销推广加盟中心  # 茂名seo网站管理 


相关栏目: 【 行业资讯67740 】 【 技术百科0 】 【 网络运营39195


相关推荐: solidworks打开igs文件看不见要怎么办解决方法  typescript文件怎么打开  品道音响上的power键是什么意思  市盈率动亏损是什么意思  云淡风轻什么意思  燃气热水器上的power是什么意思  hen是什么意思  vue组件typescript怎么用  j*a数组元素怎么用  如何发挥固态硬盘性能  手机全功能type-c接口是什么意思  access 如何输入命令  51单片机怎么连接端口  固态硬盘 如何分区  rxjs和typescript什么意思  typescript如何使用  win7如何打开命令行窗口  轩逸e-power挡位b是什么意思  360n5锁屏壁纸怎么设置  选哪个折叠屏手机好用  power在坐标轴中是什么意思  夸克为什么老是投屏失败  excel中datediff函数怎么用  html怎么使用typescript  市盈率底下 18A 19E 是什么意思  单片机怎么储存和显示  linux下如何重定位命令  夸克网盘下载为什么要钱  公司的tm市盈率为负是什么意思  折叠手机屏易坏吗为什么  如何清理固态硬盘  移动固态硬盘如何使用  索尼type-c接口是什么  折叠屏手机信号哪个最强  typescript需要学多久  酷狗音乐pc版的每日推荐在哪 酷狗音乐PC版每日推荐查找指南  考勤机power红灯是什么意思  春运预约抢票能抢到吗  如何使硬盘升级固态硬盘  如何正确使用固态硬盘  计数器上power是什么意思  苹果怎么没出5g手机  单片机是怎么复位的  j*a数组怎么保存类  如何使用批处理命令编译vc程序  2026年将会大爆发的15个新科技  如果公司ttm市盈率为负数是什么意思  虚拟机服务器如何关机命令  单片机加法程序怎么写  如何查看电脑的固态硬盘 

搜索