Vocaloid-style MV pipeline — скилл
Скилл ведет Claude Code от песни и текста до готового лирик-клипа в духе Vocaloid с рендером кадров в браузере и ffmpeg.
- 268 ★ репозитория
- Последний коммит
Расширенный доступ
Почему такой уровень
- Скилл запускает рендер, ffmpeg и скрипты Blender и клонирует стороннее хранилище JIZURA.
Установка
- Работает в
В терминале, через SkillFoxx CLI
npx skillfoxx add skills/vocaloid-style-mv-pipelineОпределит агенты на машине, покажет уровень доступа и зафиксирует версию.
Другие способы установки
Доступ и проверки
Как мы проверяемРасширенный доступИнструмент запускает код или ходит в сеть, а внешние данные только читает.
- Скилл запускает рендер, ffmpeg и скрипты Blender и клонирует стороннее хранилище JIZURA.
Это чужой код. Посмотрите файлы в репозитории перед установкой.
Что делает
Набор состоит из скилла `skills/vocaloid-style-mv/` и шаблона проекта. Скилл проводит агента по этапам: слушает трек, придумывает концепцию, делает ассеты, строит раскадровку, собирает клип, проверяет и выдает результат. Каждый кадр рисуют Canvas2D и WebGL2 в безголовом браузере, Playwright снимает кадры, ffmpeg кодирует видео. В шаблоне есть 24 параметрические сцены, 13 переходов, слой текстовой анимации JIZURA, анализ темпа через `librosa`, привязка текста к времени и скрипты Blender для тун-3D. Итог: мастер 1920×1080, вертикальная версия 1080×1920 и файлы для публикации. Для других агентов, например Codex, скилл годится как обычный Markdown со скриптами.
Для кого. Музыкантам и видеомейкерам, которые хотят делать лирик-клипы кодом и поручать повторяемый рендер агенту.
Подходит, если
- Есть трек и текст, нужен клип в стиле V家手书 с точной привязкой кадров к ударным.
- Горизонтальный клип надо пересобрать в вертикальный с переразметкой текста, а не обрезкой.
- Агент должен перерисовать ошибочную сцену и перерендерить четырехминутный клип за минуты.
- Требуется последовательный набор поз оригинального персонажа через референс-изображения.
Не подходит, если
- Нужен классический монтаж в After Effects или таймлайне редактора: проект целиком состоит из кода.
- Компьютер без Node.js, Python, ffmpeg и Chrome или Edge: без них рендер не запустится.
- Хочется использовать голос или образ реальных исполнителей: инструмент рассчитан на собственные оригинальные работы.
Пример запроса к агенту
Сделай лирик-клип по треку song.wav и тексту lyrics.txt в стиле Vocaloid: проверь окружение, предложи концепцию и раскадровку и жди моего ответа.Ограничения
Нужны Node.js 20, Python 3.10, ffmpeg с ffprobe, git и Chrome или Edge. Проверенная платформа автора: Windows 11, macOS и Linux поддерживаются через те же скрипты. Без видеокарты NVIDIA кодирование идет на x264, а программный WebGL примерно в десять раз медленнее. Blender 5.x нужен только для тун-3D, иначе агент имитирует его в 2.5D. Картинки персонажей делает отдельная модель, скилл лишь описывает метод.
Как отключить. Удалите папку `~/.claude/skills/vocaloid-style-mv`. Проекты клипов, скопированные из шаблона, лежат в ваших каталогах и удаляются вручную.
Частые вопросы
Как проверить компьютер перед стартом?
Выполните `python skills/vocaloid-style-mv/scripts/check_env.py`: скрипт проверяет Node.js, Python, ffmpeg, браузер, git и необязательные компоненты.
Почему клип считается кодом?
Каждый кадр представляет собой чистую функцию времени песни. Повторный рендер дает тот же результат, параллельные процессы берут любой кадр, а шов между сегментами не виден.
Откуда берутся тайминги текста?
Сначала берется официальный текст. `faster-whisper`, разделение вокала и принудительное выравнивание нужны для времени строк или случая, когда текста нет. Результат сохраняется в LRC с разметкой JIZURA.
Работает ли скилл вне Claude Code?
Да, он написан для Claude Code, но состоит из Markdown и скриптов, поэтому его можно отдать Codex и другим агентам.
Сколько идет рендер?
Клип в 1080p30 длиной 3 минуты 46 секунд, 6796 кадров, на RTX 3080 с тремя процессами занял около четырех минут. Скорость зависит от видеокарты.
Обсуждение
Вопросов и отзывов пока нет.
Похожие
СкиллыСкилл Video by Reference учится стилю у ролика-образца и собирает из кода анимированный короткий фильм с оригинальным саундтреком
Четыре скилла делают из песни с текстом анимированный клип в стиле акварели: раскадровка, параллельные художники и рендер.
Скилл делает музыкальный клип под вашу песню: каждый кадр рисует код, а шесть шагов с паузами ведут от разбора трека до монтажа
Скилл для Claude Code: снимает продукт в браузере, собирает ролик с главами и титрами и мастерит MP4 локально
Скилл video-explainer собирает вертикальный ролик 9:16 из сценария: озвучка, субтитры, Remotion и проверка перед рендером
Набор скиллов формата SKILL.md для производства коротких видео и контента: тема, сценарий, голос, аватар, монтаж, обложки и motion-графика
Коротко о README
Проект содержит скилл с методическими справочниками, шаблон движка и пример клипа «残光» с разбором решений. Описаны возможности рендера, привязка к ритму, работа с текстом и доставка файлов. Лицензия MIT, подробности сторонних компонентов в `THIRD_PARTY_NOTICES.md`.