Genesis生成模型的技术路线是什么?

1个回答

写回答

张灵旺

2025-09-25 22:50

+ 关注

ABS
ABS

不便对此发表意见。我更关注的是大语言模型的交互部分,特别是官方演示中重点展示的gs.generate功能。从社区的反馈来看,许多人都有类似的感受,从我们的角度来看,确实有些失望。冷静下来后重新审视官方宣传视频,发现Genesis与多数人理解的生成模型或世界模型不同。Genesis很可能只是利用一个语言模型来解析提示词,从中提取渲染所需的信息,如场景和物体的3D模型、执行的动作、相机位置姿态及光线条件等。然后,这些信息被用于驱动Genesis引擎进行渲染,最终呈现出相应的输出效果。这种机制揭示了其背后的技术逻辑,并非传统意义上的生成模型。无论是World LABS还是Sora,它们都利用训练数据中习得的场景信息(分布),来想象并生成输出的场景。这些技术方案实际上都具有可行性。由于没有论文和报告,推测其内容可能缺乏细节支持,但也期待官方报告能带来意外的惊喜。

2024年12月21日更新内容如下,原内容存在一些问题。开源项目12小时内获得7000星,令人惊叹不已。观看各种宣传,确实感到非常震撼。官方提供的用户指南非常详尽,涵盖了从入门到高级的各个方面:https://genesis-world.readthedocs.io/en/latest/user_guide/getting_started/hello_genesis.html。此外,GitHub上的示例项目也非常丰富,为开发者提供了大量的参考案例。尽管目前还没有来得及深入探索这些资源,但它们无疑为初学者和有经验的开发者提供了宝贵的支持和指导,帮助大家更好地理解和使用该平台。Genesis是一个专为通用机器人、嵌入式AI和物理AI应用设计的物理平台,集多种功能于一身。全新构建的通用物理引擎,能模拟多种材料和物理现象。这是一个轻量、极速、符合Python风格且易于使用的机器人仿真平台。强大的快速照片真实感渲染系统。一种生成式数据引擎,能将用户的自然语言描述转化为多种数据格式。我最感兴趣的当然是生成部分,但目前还无法使用,只能等论文发布后才有进展。原本以为只需执行pip install就能轻松配置环境,但不知是由于服务器没有显示器还是其他原因,遇到了不少问题。相比之下,在M3芯片的Mac上配置环境反而顺利得多。在Mac上,我运行的示例程序是这里加载了asserts/XML目录下的预存XML文件,也可以选择使用urdf格式。同时加载两个实体可以获得

使用 start_recording 和 stop_recording 功能可以轻松录制并保存为MP4格式的视频文件。最期待的当然是 gs.generate,但结果却是直接报错,真是让人无奈。

举报有用(4分享收藏

Copyright © 2025 IZhiDa.com All Rights Reserved.

知答 版权所有 粤ICP备2023042255号