WORK 03 · VIBE CODING
掌心花开
Bloom in the Palm · 手势控制的交互式花开放映
MediaPipe手势交互243 帧逐帧擦洗单文件 · 纯前端

这是一件什么作品
摄像头前,张开或合拢手掌,画面里这朵蓝色花就从花苞一路开到盛放;手停下的那一刻,花也停在那一帧。没有播放键——整朵花的开合节奏,完全由你拇指和食指的距离决定。
作品背后是一段 10 秒、243 帧的花开影像,页面把它拆成可以逐帧拖动的进度:拇指与食指的距离映射为 0%~100%,最近 100 毫秒的识别结果取平均来过滤抖动,手一停画面立即停住。
实现亮点
- MediaPipe HandLandmarker 在浏览器本地识别 21 个手部关键点(优先 GPU,失败自动退回 CPU);用「拇指尖 ↔ 食指尖」的距离除以手掌宽度做尺度归一化,手离镜头远近都不影响手感。
- 视频始终暂停,只改 currentTime 做逐帧擦洗;素材重新编码成每 4 帧一个关键帧,任意位置跳转只需解码极少量帧,拖动才会顺滑。
- 0.1 秒滚动平均 + 进度死区:手静止时进度完全不动,不会出现画面自己漂移;手离开画面时,花停在最后一帧。
- 单文件纯前端(约 26 KB HTML):MediaPipe 从 CDN 加载,视频与封面本地托管;没有摄像头时可以拖动画面或按 ←/→ 微调,按 D 还能查看手部关键点。摄像头画面只在本地处理。
小提示:打开后允许摄像头,手离镜头约 40~80 厘米;合拢手掌 = 花苞,张开手掌 = 盛开,手停画面停。没有摄像头也能玩——按住画面左右拖动,或按 ←/→ 微调;按 D 查看摄像头与手部关键点。