Аудиоуправляемая модель, которая генерирует разговорное видео с участием нескольких человек на основе многопотокового аудио и опорного изображения.
Создавайте диалог между несколькими людьми, каждый из которых синхронизирован по губам с собственным аудио.
MultiTalk — это фреймворк от MeiGen-AI для аудиоуправляемого многолюдного разговорного видео. Получая на вход раздельные аудиопотоки, опорное изображение и промпт, он рендерит взаимодействующих людей с соответствующей артикуляцией губ. Подходит для разработчиков с мощным GPU.
В README описывается ввод многопотокового аудио вместе с промптом, инференс на нескольких GPU, TeaCache, APG и режим с низким потреблением VRAM, который запускает 480P на одном RTX 4090. Текущий код поддерживает только 480P на одном GPU, а для 720P требуется несколько GPU.
Подходит для исследователей и разработчиков, создающих ролики с несколькими спикерами, например интервью. Не подходит тем, кому нужна студия, шаблоны или встроенные голоса.
Отдельные аудиодорожки управляют каждым человеком.
Текстовый промпт описывает, как люди взаимодействуют друг с другом.
480P на одной карте RTX 4090.
Скрипты torchrun распределяют работу между GPU.
Опции ускорения и снижения артефактов.
Сообщество обеспечивает работу от 8 GB VRAM.
Бесплатно под лицензией Apache-2.0. В README нет информации о хостинге или платных тарифах, поэтому единственные затраты — это ваш собственный или арендованный GPU.
897 открытых удалённых вакансий по обучению ИИ, обновлено 17 ноября 2026 г.; в большинстве оплата $20–$170 в час. Из них 2 — для носителей русского языка. Zekai публикует их бесплатно; отклик уходит на платформу работодателя.
Эти проверенные ИИ-инструменты делают то же самое мгновенно — из нашего оценённого каталога.
Да. Модель принимает многопотоковый аудиовход и управляет каждым человеком с помощью его собственного аудио.
Да, в разрешении 480P: в README указано, что режим low-VRAM позволяет запускать 480P на одном RTX 4090. Для 720P требуется несколько GPU.
Код распространяется под лицензией Apache-2.0; проверьте лицензию весов базовой модели, которые она скачивает.
Zekai первым в Google