EgoSim

一句话生成第一人称交互视频,为具身智能造数据

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 视频生成 🍴 复刻 3 🐛 待处理 3
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 73
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,代码公开,可自行部署使用,无收费计划。

项目预览

EgoSim 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队jinkun-hao
定价模式🏷️完全免费
价格说明开源项目,代码公开,可自行部署使用,无收费计划。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Python
技术栈/模型egocentric-vision,video-generation,world-model
GitHub 星标★ 73
上线时间2026-03-31 00:00:00
代码更新2026-06-26
仓库体积3.9 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数2

项目介绍

EgoSim 是一个面向具身智能与第一人称视觉的仿真世界生成器,核心解决现有视频生成模型缺乏第一人称视角与交互一致性的问题。它能够根据用户提供的动作指令或场景描述,生成以自我为中心的、包含手部与物体交互的连续视频片段,模拟真实世界中的操作过程。项目基于扩散模型架构,支持细粒度的动作控制与视角稳定,并引入世界模型概念以增强时序连贯性。其核心能力包括:第一人称视频合成、交互动作驱动、多场景泛化。该工具旨在为机器人学习、AR/VR 体验和自动驾驶等需要第一人称数据的研究提供低成本、可扩展的合成数据方案,减少对真实采集数据的依赖。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 73

核心亮点

  • 聚焦第一人称视角,填补通用视频生成在该领域的空白
  • 支持动作指令驱动,可生成手物交互的连续视频
  • 基于扩散模型,视频质量与一致性有保障

不足之处

  • 项目处于早期,文档与社区生态待观察
  • 仅支持第一人称场景,通用性受限

适用场景

  • 机器人操作技能学习的数据生成
  • AR/VR 中第一人称交互体验模拟
  • 自动驾驶行人视角场景合成

替代项目

World Models、VideoPoet、Genie

上一篇:Awesome-Video-World-Models

下一篇:rcm

同类项目推荐

TheoremExplainAgent 开源

让LLM定理推理变成看得懂的动画视频,自动生成教学讲解。

Official Repo for "TheoremExplainAgent: Towards Video-based Multimodal Explanations ···

★ 1514 2026-08-09
YouDub-webui 开源

一键下载翻译配音,视频自动变中文版

Open-source AI video localization and dubbing for YouTube/Bilibili: speech recogniti···

★ 5822 2026-08-09
MuseV 开源

一张照片,生成无限时长高保真虚拟人视频

MuseV: Infinite-length and High Fidelity Virtual Human Video Generation with Visual ···

★ 2849 2026-08-09
short-video-maker 开源

输入主题,自动生成适配多平台的短视频。

Creates short videos for TikTok, Instagram Reels, and YouTube Shorts using the Model···

★ 1478 2026-08-09
rea-video 开源

逐镜拆解任意视频,告诉你它怎么拍的、怎么复刻

Reverse-engineer any video, shot by shot: filmed, AI-generated or coded, and how to ···

★ 5073 2026-11-07
LivePortrait 开源

一张照片传上去,人就能开口说话

Bring portraits to life!

★ 19439 2026-08-09
flux-3-video-api 开源

一行 Python 代码,调用 FLUX 3 生成带声音的视频

Python wrapper for Black Forest Labs' FLUX 3 video API — Text-to-Video and Image-to···

★ 98 2026-08-09
Vista4D 开源

用 4D 点云重拍视频,自由切换视角

Official code, models, and data for Vista4D: Video Reshooting with 4D Point Clouds (···

★ 616 2026-08-09
VideoGraphAI 开源

输入主题,自动生成带配音字幕的 YouTube 短视频

AI-powered YouTube Shorts automation tool using LLMs, real-time search, and text-to-···

★ 74 2026-08-09