跳到正文
AGI Hunt· alexanderchen·· 2 小时前AI 评分51

用 Transkun 转写钢琴 MIDI,再以 Gemini 驱动 3D 可视化

AI 导读

Alexander Chen 分享了一套音乐可视化工作流,先用 Transkun 将钢琴音频转写为 MIDI 并追踪手部位置,再通过 three.js 结合 Google Antigravity 中的 Gemini 实现可在空间中无限下沉的 3D 效果。Transkun 基于神经半-CRF,支持通过 pip 直接安装,其 GitHub 仓库约有 500 星,原文还附有可拖动时间轴探索的交互原型。

来源:AGI Hunt · agihunt.info