今年 12 月,AI 视频生成领域的发布似乎无穷无尽——继Sora和Veo 2之后,焦点现在转移到Genesis 。
Genesis 是一款能够生成高度逼真的模拟的 AI 物理引擎。它的速度非常快,可以生成交互式 4D 世界。主要用例包括机器人技术和物理实验。
在这篇博客中,我将概述 Genesis,展示一些示例,并将其与 Sora 等其他视频生成工具进行比较。要了解如何设置 Genesis,请阅读有关设置 Genesis 的分步指南。
创世记是什么?
Genesis 是一个物理平台,用途广泛,包括机器人、与现实世界互动的人工智能以及与物理对象一起工作的人工智能。Genesis 是 20 多个研究实验室在两年内进行大规模合作的成果。
开发 Genesis 的核心贡献者
核心贡献者。图片来源:Genesis
与常规视频生成器不同,Genesis 是专门设计为物理引 比利时赌博数据 擎的。它将不同的物理工具(如刚体、流体和软材料)组合到一个系统中。这使得它能够处理各种现实世界的模拟。我们可以将 Genesis 用作:
物理引擎:这是一个超先进的物理模拟器,可以处理各种材料和物理事件,完全从头开始重建。
机器人模拟器:它重量轻、速度超快、易于与 Python 一起使用,非常适合模拟机器人。
渲染系统:它能够快速且高质量地创建逼真的视觉效果。
数据生成器:它可以将自然语言描述转换成各种数据。
开发人工智能应用程序
学习使用 OpenAI API 构建 AI 应用程序。
与旧的仿真平台相比,Genesis 的一些主要特点如下:
速度惊人:Genesis 速度极快,在 RTX 4090 上模拟机械臂的速度超过 4300 万帧/秒 (FPS)。这比实时速度快 430,000 倍!Genesis 是世界上最快的物理引擎,比 Isaac Gym 或 Mujoco 等其他模拟器快 80 倍,且准确度不打折扣。
可在任何地方运行:它可在 Linux、MacOS 和 Windows 上运行,并支持不同的硬件,包括 CPU、Nvidia GPU、AMD GPU 和 Apple Metal。
一体化物理系统:Genesis 将许多物理工具整合到一个系统中,可模拟刚体、液体、气体、可变形物体等。它可以处理各种材料及其相互作用。
支持所有机器人:机械臂、无人机、软机器人、腿部机器……只要您说得出,Genesis 就能处理各种对象,并支持 .xml、.obj、.stl 等流行文件类型。
由 Python 提供支持:Genesis 完全用 Python 构建,使用和定制都很简单。
Genesis 视频示例
Genesis 可以以惊人的精度模拟物体运动、角色动作和交互等。让我们来看看 Genesis 团队分享的几个例子。
创建 4D 动态世界
Genesis 使用其先进的物理引擎和 AI 工具来构建详细、逼真的虚拟世界,其中包括 4 维运动和交互。这些世界可用于创建精确的视频、动画和其他用于模拟的数据。它甚至可以生成自然且一致的摄像机运动和物体动作。
角色动作
Genesis 可以为角色创建详细的动画。例如:
一个小小的悟空形象冲过桌子,跳到空中,在跳跃过程中停顿,同时镜头围绕着他旋转,最后落地。
机器人策略生成
Genesis 帮助机器人在各种场景中学习技能并自动执行任务。以下是一个例子:
机械臂在微波炉中加热食物
交互式 3D 场景生成
Genesis 可以创建详细的 3D 空间,例如:
住宅内部设有客厅、厨房、书房和卧室
开放世界物体创造
Genesis 可以生成具有活动部件(铰接物体)的逼真物体,其超越了典型的预制资产。
https://fast.wistia.net/embed/iframe/ky8a97xikq
软机器人模拟
Genesis 模拟软机器人或混合机器人(具有刚性骨架的柔软外壳),例如:
一种以类似肌肉的特性运动的蠕虫。
Genesis 物理引擎:带有示例的指南
-
- Posts: 324
- Joined: Mon Dec 23, 2024 5:03 am