Wonder Journey

415次阅读

Wonder Journey,只需要1张图片或段文字描述就可以创建3D场景动画,这是一个用于永久场景生成的模块化框架,由斯坦福大学和谷歌联手打造,是一项突破性项目。

Wonder Journey网址体验入口:https://kovenyu.com/wonderjourney

与之前专注于单一类型场景的视图生成工作不同, 我们从用户提供的任何位置(通过文本描述或图像)开始, 并通过一长串不同但连贯相连的 3D 场景生成旅程。 我们利用LLM来生成这个旅程中场景的文本描述, 文本驱动的点云生成管道,用于制作引人入胜且连贯的 3D 场景, 每个场景都充满多样性且紧密相连,以及一个大型 VLM,用于验证生成的场景。 我们在各种场景类型和风格中展示引人注目的、多样化的视觉效果,形成想象中的“奇妙旅程”。

Wonder Journey 的独特之处在于它可以灵活地从任何位置启动,无论是图像还是文本描述。这开启了一场“奇妙之旅”——沿着相机轨迹的一系列 3D 场景,展示了多样化但相互关联的景观。

从任意位置(由文本或图像指定)开始,Wonder Journey 生成一系列 沿着相机轨迹的多样化但连贯相连的 3D 场景(即“奇妙之旅”)。 我们使用来回的摄像机轨迹来渲染“奇妙之旅”。

Wonder Journey 可以合成长篇“wonder journeys”。 将鼠标悬停在视频上可暂停自动滑动。

从同一位置开始,Wonder Journey 可以生成 一系列多样化的“奇妙之旅”,在不同的目的地结束。我们使用相机姿势的轨迹来渲染下面的每个视频。 将鼠标悬停在视频上可暂停自动滑动。

Wonder Journey 还可以生成受控的 wonder journeys 给定一系列文本描述,例如诗歌、俳句和故事摘要。 将鼠标悬停在视频上可暂停自动滑动。此功能允许用户影响旅程的主题方向和进展,使其不仅成为探索的工具,而且成为讲故事和艺术表达的工具。

Wonder Journey
收录说明:
1、本网页并非 Wonder Journey 官网网址页面,此页面内容编录于互联网,只作展示之用;2、如果有与 Wonder Journey 相关业务事宜,请访问其网站并获取联系方式;3、本站与 Wonder Journey 无任何关系,对于 Wonder Journey 网站中的信息,请用户谨慎辨识其真伪。4、本站收录 Wonder Journey 时,此站内容访问正常,如遇跳转非法网站,有可能此网站被非法入侵或者已更换新网址,导致旧网址被非法使用,5、如果你是网站站长或者负责人,不想被收录请邮件删除:i-hu#Foxmail.com (#换@)

正文完
 0
3D&游戏
版权声明:本站原创文章,由 3D&游戏 于2023-12-19发表,共计1044字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。