11 ноября 2026 года независимый разработчик под ником lucidml_lover выложил на Hugging Face модель lucidml/gta, свою первую публичную world model. Модель берёт любое изображение и превращает его в интерактивное видео, которым можно управлять в реальном времени. Локально она работает на RTX 3060, RTX 4060 и более мощных видеокартах, а для быстрой проверки без установки есть онлайн-демо на GPU от VAST AI.
Разница с обычной генерацией видео в постановке задачи. Генератор ждёт текстовый промпт и выдаёт готовый клип. World model получает кадр и действия пользователя: «поворачиваю камеру вправо, покажи, что будет дальше», и перестраивает сцену по ходу просмотра. Название gta к игре отношения не имеет: так автор обозначил версию, которая стабильнее «общей» модели, при этом картинку можно подать любую.
Что важно знать до запуска: автор сам называет ограничения по консистентности и качеству и планирует дообучение. Перед нами эксперимент, а не готовый инструмент для продакшена. Ниже: как устроен подход, что подтверждено первоисточником, чего в нём нет, и как попробовать модель через демо и локально.
Что такое world model и чем она отличается от генерации видео
World model (мир-модель) строит внутреннее представление сцены и предсказывает, как эта сцена изменится после действия. Модель держит в голове состояние мира: расположение объектов, перспективу, освещение, и обновляет картинку шаг за шагом. Именно поэтому lucidml/gta принимает любое изображение: скриншот, фотографию, кадр из игры. Дальше начинается интерактив, где новые кадры появляются в ответ на ввод пользователя.
Подход не новый как идея, но редкий в виде готовой модели для домашней видеокарты. Похожий принцип разбирали в материале про H3 World Model, где кадр Fallout 2 превращают в 3D-сцену с управлением: там сцена тоже живёт по действиям игрока, а не по одному промпту.
World model vs text-to-video: где проходит граница
Разница видна, если сравнить вход, выход и роль пользователя.
| Параметр | Генератор видео | World model |
|---|---|---|
| Вход | Текстовый промпт, иногда опорная картинка | Изображение плюс действия пользователя |
| Выход | Клип фиксированной длины | Непрерывный поток кадров, меняющийся по ходу |
| Роль пользователя | Один раз задаёт задачу и ждёт рендер | Влияет на сцену в реальном времени |
| Что важно в результате | Соответствие промпту и качество картинки | Консистентность сцены и отзывчивость на управление |
Практический вывод: сравнивать такую модель с генераторами видео по «красоте кадра» бессмысленно, задачи разные. Бенчмарков и сравнений качества с другими world model автор в анонсе не приводит, поэтому любые цифры на эту тему были бы догадкой.
Почему это называют интерактивным видео
«Управляемое в реальном времени» значит, что сцена реагирует на ввод по ходу просмотра, а не после рендера. Формулировка автора: модель превращает изображения в интерактивные видео, которыми вы управляете в реальном времени. Конкретный набор органов управления в анонсе не расписан: нет списка клавиш, нет описания движений камеры или доступных действий. Проверить интерактивность проще всего в демо: загрузить картинку, подёргать управление и посмотреть, насколько сцена держится.
Что представляет собой lucidml/gta: факты без маркетинга
Подтверждённый набор фактов из анонса в r/LocalLLaMA:
- автор, независимый разработчик lucidml_lover, выпустил первую в своей практике публичную world model;
- модель называется lucidml/gta и размещена на Hugging Face;
- вход: любое изображение, выход: интерактивное видео с управлением в реальном времени;
- локальные GPU: RTX 3060, RTX 4060 и всё, что мощнее;
- для быстрого теста есть онлайн-демо на инфраструктуре VAST AI;
- дообучение запланировано, текущее качество автор считает не финальным.
Про название. gta здесь не про игру и не про привязку к конкретному сеттингу. Автор пишет прямо: «I know it says gta but it's more stable than the general model. It can take any image». То есть версия с таким именем стабильнее «общей» модели, а картинку можно подать любую. Ждать, что на входе обязателен кадр из GTA, не стоит: это маркетингово неудобное, зато честное имя для промежуточного чекпоинта.
Цен, версий и списка поддерживаемых форматов в анонсе нет. Всё, что не подтверждено, проверяется в карточке модели на Hugging Face.
Архитектура: трансформер с обучаемыми сводками (learned summaries)
Об архитектуре автор говорит коротко: это трансформер, который использует learned summaries, то есть обучаемые сводки. Ручных эвристик здесь нет: модель сама учится сжимать контекст в компактные представления и опираться на них при генерации следующих кадров. Название подсказывает направление, но не раскрывает механику.
Деталей в анонсе нет: ни числа параметров, ни размера контекста, ни данных о датасете, ни описания того, как именно формируются сводки. Подробности автор вынес в технические отчёты на lucidml.ai/summaryformer. Если нужна техническая фактура, идти надо туда: в анонсе её просто не существует, а достраивать устройство модели по названию было бы фантазией.
Для практика из этого следует одно: перед локальным запуском стоит открыть отчёты и карточку модели, потому что от архитектуры зависят требования к памяти и поведение на длинных сессиях.
Как протестировать без установки: онлайн-демо на VAST AI
Демо доступно по адресу lucidml.ai/dashboard/minidemo?world=gta5. Параметр world=gta5 указывает на конкретную версию модели. Запуск идёт на GPU от VAST AI: в анонсе перечислены карты уровня RTX 3070, 3080, 4080 и часть карт 50-й серии. Железо заведомо мощнее минимальных 3060 и 4060, так что демо не покажет, как модель поведёт себя на нижней границе.
«Most 50 series cards are wasted because I hard throttle the fps»: автор сам объясняет, почему мощные карты в демо простаивают.
FPS ограничен намеренно и жёстко. Практический вывод: демо годится, чтобы понять, как выглядит интерактив и насколько сцена держится на ходу. Как бенчмарк оно не годится: по нему нельзя судить ни о максимальном FPS на домашней карте, ни о запасе производительности модели, ни о разнице между 3060 и 4060. Воспринимайте minidemo как витрину механики.
Локальный запуск на RTX 3060 и 4060: что известно о требованиях
Подтверждено ровно одно: модель работает локально на RTX 3060, RTX 4060 и более мощных видеокартах. Это нижняя граница, которую назвал автор. Объём VRAM, скорость, формат весов, разрешение входа в анонсе не раскрыты, пошаговой инструкции по установке тоже нет.
Разумный маршрут: сначала демо, затем карточка модели на Hugging Face, где обычно лежат файлы и требования, затем техотчёты. Локальный запуск без этих данных превращается в угадывание параметров и ручной подбор конфигурации.
RTX 3060 vs 4060: на что ориентироваться
Источник называет обе карты рабочими и не даёт между ними никакой разницы в цифрах: ни FPS, ни VRAM. Сравнивать их по этой модели пока нечем. Из общих соображений: RTX 3060 встречается в версии с 12 ГБ памяти, у RTX 4060 памяти меньше, зато карта новее. Что из этого важнее для lucidml/gta, по анонсу не определить, потому что требований к памяти там нет.
Если локальные модели и ограничения по VRAM для вас новая тема, полезно сначала разобраться в общих принципах: видеокарта с меньшим объёмом памяти упирается в лимит быстрее, чем в скорость. Для этой модели такие замеры ещё никто публично не приводил.
Чего в источнике нет и почему это важно
Список пробелов стоит держать перед глазами, чтобы не принять чужие догадки за факты:
- нет ни одной цифры FPS;
- нет требований к объёму VRAM;
- нет инструкции по установке и списка зависимостей;
- нет данных о поддерживаемом разрешении, длине сессии и соотношениях сторон;
- нет сравнения с другими world model.
Это граница доступных данных: в анонсе таких деталей просто нет. Дальше либо ждать обновлений от автора, либо смотреть карточку модели и отчёты. Отдельно стоит помнить, что браузерного варианта для lucidml/gta не заявлено; про локальный инференс в браузере в целом есть разбор Transformers.js v3, WebGPU и dtype, но это другая технологическая ветка.
Ограничения и перспективы: что честно признаёт автор
Слабые места автор не прячет: «I know there are a lot of limitations still like consistency and quality improvements, and am hoping to train this more to fix all of those». Два ключевых слова здесь: консистентность и качество.
Консистентность значит, что сцена может «плыть»: объекты меняют форму, фон перестраивается, пространственная логика ломается при долгом взаимодействии. Качество отвечает за детализацию и артефакты в кадре. Оба ограничения типичны для генеративных world model, и оба бьют по главному обещанию: интерактивная сцена должна оставаться той же сценой, пока вы в ней находитесь.
Что это значит на практике: строить продукт на lucidml/gta рано. Модель интересна как эксперимент и как первая публичная работа автора. Дообучение запланировано, однако сроков, объёма работ и целевых метрик в анонсе нет, поэтому обещать скорое исправление не на чем.
Перспектива подхода понятна: интерактивные среды, где сцену не рендерят заранее, а генерируют на ходу. Насколько быстро такие модели дойдут до стабильного качества, зависит от вычислительных ресурсов и данных. Здесь источник молчит.
Кому это нужно на практике и стоит ли пробовать
Пробовать стоит, если вы:
- разбираетесь в world model и хотите увидеть живой пример на потребительской карте;
- экспериментируете с интерактивной генерацией и ищете новые механики для прототипов;
- владеете RTX 3060, 4060 или чем-то мощнее и готовы повозиться с запуском.
Рано, если нужна стабильная картинка для клиентского проекта, предсказуемый FPS или гарантии консистентности на длинных сессиях. В текущем виде это исследовательский инструмент с известными ограничениями.
Смежная область, где локальные видео-модели уже работают иначе: LFM3-VL-2B описывает видео в браузере на WebGPU. Там модель анализирует ролик, а не генерирует интерактивную сцену, но требования к железу и логика локального запуска похожи.
Маршрут из трёх шагов: демо на VAST AI, затем карточка модели на Hugging Face, затем локальный запуск при наличии подходящей GPU. Техотчёты стоит открыть до локального запуска, если планируете что-то строить поверх модели.
Итог: где скачать и что читать дальше
Первоисточники и точки входа:
- анонс автора в r/LocalLLaMA, тред с релизом lucidml/gta, там же ссылка на карточку модели;
- модель lucidml/gta на Hugging Face, ищите по этому имени;
- технические отчёты по архитектуре: lucidml.ai/summaryformer;
- онлайн-демо: lucidml.ai/dashboard/minidemo?world=gta5;
- автор: lucidml_lover.
Короткое резюме. World model и генерация видео решают разные задачи: первая даёт управляемую сцену, вторая выдаёт готовый клип. lucidml/gta работает локально на RTX 3060, RTX 4060 и мощнее, но конкретных требований к VRAM и FPS автор не публиковал. Демо живёт на GPU от VAST AI с намеренно ограниченным FPS, поэтому о производительности по нему судить нельзя. Ограничения по консистентности и качеству признаны открыто, дообучение планируется.
Если нужен быстрый вывод для себя: откройте minidemo, прогоните пару своих картинок и решите, хватает ли текущего качества под вашу задачу. Для серьёзной работы модель пока сырая.