手势框选实时生成AI视频:Gemini与MediaPipe开源项目爆火
mhdfaran · x · 2026-08-12
开发者 sophiamyang 在 GitHub 开源了一个名为 finger-frame-effect-ai 的项目,实现了通过手指框选手势控制 AI 视频特效。
- 核心玩法:用户用双手比出一个相框手势,系统会追踪手指间的画面,并将其替换为 AI 生成的视频内容。当手部移动时,这个“AI视窗”也会随之移动。
- 技术栈:项目结合了 MediaPipe 的手部追踪技术与 Gemini 的视频生成能力(具体为视频风格重绘模型)。
- 生成模式:支持将原视频转换为 3D 动画电影、动漫、黏土动画、水彩等多种风格,整个视频片段(包括运动和眨眼等细节)都会被重新生成并合成。
所属事件:开发者开源手势控制AI视频特效项目(2 条相关)→
「编程与Agent」频道最新
- 前 Cognition 等核心成员创立 Hone:主打组织级 AI 智能体 — marvinvonhagen · 2026-08-13
- AI编程Agent能免审上线吗?开发者热议生产环境信任边界 — meghna_rana · 2026-08-13
- 用 AI 完整接管 NFL 梦幻橄榄球队:长周期决策能力实测 — Prestigious-Dig2263 · 2026-08-13
- Kimi K3 接入 GitHub Copilot,实测一句话生成游戏 — film_girl · 2026-08-13
- Meta 发布 AI 编程助手 Muse Code,采用按量计费直击 OpenAI 与 Anthropic — Beth_Kindig · 2026-08-13
- DeepMind 研究员实测 Claude Code:AI 智能体已能解决真实问题 — mpshanahan · 2026-08-13