В обычной игре мир нарисован заранее: художники сделали уровни, программисты — правила. Здесь мира заранее нет. Нейросеть рисует картинку кадр за кадром, отвечая на Ваши нажатия: шагнули влево — и она дорисовывает, что там слева.
«Нейроигры» — инструмент из Лаборатории Seaframe, экспериментальный. Задержки и качество картинки зависят от сети, и кое-что в нём работает шероховато — об этом честно расскажем. Покажем три сеанса: игру за кота с фотографии, мир на «Автопилоте» и «Живое зеркало». Ничего из этого не сохраняется — это живая трансляция, поэтому ролики в статье — запись видеопотока во время сеанса, без ускорения и обработки. Кот на фото условный, сгенерирован нейросетью; про то, что было вместо камеры в зеркале, — ниже.
- Инструмент
- Нейроигры — Лаборатория
- Что берём
- фото кота для мира «Кот», мир «Ледяная переправа» на «Автопилоте», ролик с лицом вместо камеры для «Живого зеркала»
- Запусков
- три сеанса по одной минуте, все с записью
- Что получили
- три живых сеанса; первый кадр — через 12–28 секунд после нажатия
Два режима: «Игра» и «Живое зеркало»
Сверху экрана — выбор «Режим».
«Игра». Двенадцать готовых миров: Ледяная переправа, Паучья нора, Импульсная перестрелка, Глубоководный удар, Нашествие кайдзю, Аркадная дуэль, Пустыня, Снежки, Щенок, Кот, Дрон и Пастух. В мирах «Кот» и «Щенок» можно загрузить фото своего питомца — игра начнётся с него. Галочка «Автопилот» включает режим, в котором игра играет сама, а Ваши нажатия её перебивают.
«Живое зеркало». Камера компьютера или телефона, а картинка с неё в реальном времени перерисовывается в выбранный стиль: Аниме, Мультфильм, Пластилин, Комикс или Масло. Стиль выбирается до начала: во время сеанса зеркало держит выбранный вид. Браузер попросит разрешить доступ к камере.
Управление и сеанс
На компьютере:
| Клавиша | Что делает |
|---|---|
| W A S D | идти |
| Стрелки | смотреть по сторонам |
| Пробел | прыжок |
| Клик или Enter | действие, огонь |
| 1–4 | способности |
На телефоне те же действия — экранными кнопками.
Играют сеансами: «1 минута» или «3 минуты». Кнопка — «Играть» в игре и «Включить зеркало» в зеркале, цена сеанса в кредитах — на ней до запуска. Сеанс заканчивается сам, когда выйдет время. Закончить раньше можно кнопкой «Стоп», но оплаченное время не возвращается.
Учтите подключение. После нажатия «Играть» первый кадр приходит не сразу: у нас — через 12, 19 и 28 секунд. Пока идёт подключение, таймера нет: оплаченное время пускается с первого кадра, так что минута — это минута живой картинки. Если сеанс так и не откроется, кредиты вернутся сами.
Играем за своего кота
Самый тёплый мир — «Кот»: загрузите фото своего кота, и игра начнётся с него. Мы взяли снимок, где кот виден целиком и крупно: рыжий, с белой грудкой, сидит на сером диване. Снимок условный — его нарисовала нейросеть.
Первый кадр игры — почти наше фото: тот же кот, тот же диван и подушка. Сверху появилась цель — по-английски, прямо в картинке: «Knock all three pots down», «сбросить все три горшка», — а внизу счётчики. Подсказки в кадре рисует сама нейросеть, на английском и со своими клавишами вроде «F»; в Seaframe действие — Enter или клик.
Кот узнаётся всю минуту — рыжий окрас и белая грудка не меняются. Мир вокруг дорисовывается: на подлокотниках появляются горшки, по спинке дивана пробегает котёнок, за диваном — стол. Ходить котом трудно: на W он скорее поворачивается и переминается, чем идёт, зато действие сработало — счётчик в кадре показал «Paw swipes: 1», удар лапой засчитан. Отклик на нажатия — около секунды. К концу минуты картинка начинает «плыть»: кот встаёт на задние лапы, мех пересвечивается, а перед ним вырастает решётка, которой не было.
Мир на «Автопилоте»
С галочкой «Автопилот» игра играет сама — можно просто смотреть, как нейросеть ведёт мир. Стоит нажать клавишу — управление переходит к Вам.
Мы выбрали «Ледяную переправу». Это шутер от первого лица над лавой: в руках — замораживающая пушка, цель — «Freeze the crossing», заморозить камни-ступеньки и дойти по ним до дальней площадки. Первые 20 секунд мы не трогали клавиши, потом перебили «Автопилот» своими нажатиями.
«Автопилот» сам повёл прицел на камень и заморозил его — счётчик показал первую ледяную плиту из трёх. Момент перехвата заметен сразу: как только мы пошли вперёд и прыгнули, на экране появилось «You fell into the lava» — «Вы упали в лаву». Кнопка «Play again» на этой плашке — тоже часть картинки, нажать её нельзя: мир просто продолжается, и счётчик сбрасывается. За минуту мы упали в лаву дважды. Сама картинка держится лучше, чем у кота: пещера, лава и площадка вдали остаются на местах.
«Живое зеркало»: камера в стиле аниме
В «Живом зеркале» нет игры — есть камера. Картинка с неё перерисовывается в выбранный стиль прямо во время съёмки: поворачиваетесь, улыбаетесь, подносите чашку — и всё это в реальном времени появляется в стиле аниме, мультфильма или пластилина.
Вместо камеры ноутбука мы подали браузеру ролик — так браузер умеет для проверок: героиня из нашего разбора «Говорящее фото» крупным планом, как с веб-камеры, говорит и улыбается. Человека перед камерой в этом сеансе не было, а стиль — «Аниме».
Лицо держится: кудри, форма лица и серёжки остаются, веснушки упростились, а глаза стали ярко-голубыми, как у аниме-героини. Мимика повторяется за «камерой» — моргание, улыбка, открытый рот на смехе. Ближе к концу минуты на щеках иногда проступают лишние линии-«завитки», которых нет на исходнике.
Стиль меняется только до начала. Мы пробовали переключить «Аниме» на «Пластилин» посреди сеанса — зеркало осталось в аниме: модель держит мир, который нарисовала в начале. Поэтому в Seaframe стиль выбирается до старта, а во время сеанса кнопки стилей неактивны.
Чего не ждать от лаборатории
- Это не игра с сохранениями. Сеанс — живая трансляция на одну или три минуты; закончилось время — мир исчез.
- Это не ролик. В Библиотеке после сеанса ничего не появится.
- Задержки бывают. Скорость ответа и качество картинки зависят от сети.
- «Стоп» не возвращает время. Оплаченные минуты сгорают, даже если закончить раньше.
- Подключение — до полуминуты. Первый кадр приходит через 10–30 секунд после нажатия; оплаченное время идёт с него.
- Мир «плывёт». Ближе к концу минуты в картинке появляются лишние детали; подсказки в кадре — на английском.
- Стиль зеркала — до начала. Во время сеанса он не меняется.
Как сыграть самому
- Выберите режим
«Игра» — один из двенадцати миров; «Живое зеркало» — камера и стиль.
- Настройте
В мирах «Кот» и «Щенок» загрузите фото питомца; по желанию включите «Автопилот». В зеркале выберите стиль и разрешите доступ к камере.
- Выберите сеанс
«1 минута» или «3 минуты».
- Нажмите «Играть» или «Включить зеркало»
Цена в кредитах — на кнопке до запуска.
- Играйте
На компьютере — W A S D, стрелки, пробел, клик или Enter, 1–4; на телефоне — экранные кнопки. Закончить раньше — «Стоп».
Что в итоге
- В «Нейроиграх» мир не нарисован заранее: нейросеть рисует его кадр за кадром в ответ на Ваши нажатия.
- Двенадцать миров и «Живое зеркало»; в мирах «Кот» и «Щенок» можно играть за своего питомца с фото — кот с фото узнаётся всю минуту.
- Отклик на нажатия — около секунды; к концу минуты мир начинает «плыть», а в «Ледяной переправе» перехват у «Автопилота» закончился падением в лаву.
- «Живое зеркало» держит лицо и мимику; стиль выбирается до начала сеанса.
- Это лаборатория: первый кадр приходит через 10–30 секунд (время идёт с него), задержки зависят от сети, лучше играть на компьютере с хорошим интернетом.
- Ничего не сохраняется — хотите оставить момент на память, записывайте экран.