Проект Genie от Google создает виртуальные миры, которые можно исследовать в реальном времени, предлагая заглянуть в будущее VR
DeepMind, исследовательская лаборатория Google в области искусственного интеллекта, анонсировала Genie 3 в августе прошлого года, продемонстрировав систему ИИ, способную генерировать интерактивные виртуальные среды в реальном времени. Теперь Google выпустила экспериментальный прототип, который подписчики Google AI могут опробовать уже сегодня. Конечно, пока нельзя создавать виртуальные миры на лету, но мы очень близки к этому.
Новости
Проект Genie — это то, что Google называет «экспериментальным исследовательским прототипом», поэтому это пока не совсем «игровая машина с ИИ» вашей мечты. По сути, система позволяет пользователям создавать, исследовать и изменять интерактивные виртуальные среды через веб-интерфейс.
Система во многом похожа на предыдущие генераторы изображений и видео, которые требуют ввода текстового запроса и/или загрузки эталонных изображений, хотя Project Genie идет на несколько шагов дальше.
Вместо одного основного окна подсказок, Project Genie имеет два — одно для окружения, другое для персонажа. Третье окно подсказок также позволяет изменять первоначальный внешний вид до полной генерации окружения (например, увеличить размер меча, изменить деревья на время падения).
Как ранняя исследовательская система, Project Genie имеет ограничения. Сгенерированное окружение может не совсем точно соответствовать физике реального мира или подсказкам, управление персонажем может быть непоследовательным, сеансы ограничены 60 секундами, а некоторые ранее анонсированные функции еще не включены.
И на данный момент единственное, что вы можете вывести, — это видеозапись процесса, хотя вы можете исследовать и переделывать другие «миры», доступные в галерее.
Project Genie сейчас распространяется среди подписчиков Google AI Ultra в США в возрасте 18 лет и старше, более широкое распространение планируется в будущем.
Личное мнение автора
Прежде чем мы сможем увидеть что-то подобное Project Genie, работающее на VR-гарнитуре, предстоит преодолеть множество препятствий.
Одной из важнейших проблем, которую необходимо преодолеть, несомненно, является облачная потоковая передача. Честно говоря, облачные игры существуют на VR-гарнитурах, но сейчас они не очень хороши, поскольку задержка сильно варьируется в зависимости от близости к центру обработки данных сервиса. Кроме того, крупные игроки на рынке облачных игр (например, NVIDIA GeForce Now, Xbox Cloud Gaming) в основном ориентированы на игры для обычных экранов; когда дело доходит до задержки рендеринга и ввода, планка намного ниже, чем для VR-гарнитур, которые обычно требуют максимум 20 мс задержки между движением и изображением, чтобы избежать дискомфорта для пользователя.
И это также не учитывая того факта, что система Project Genie также должна каким-то образом отображать мир со стереоскопическим эффектом — что может создать свои собственные проблемы, поскольку системе технически потребуются две разные точки зрения, которые будут складываться в единое, цельное 3D-изображение.
Насколько я понимаю, модели мира, созданные в Project Genie, являются вероятностными, то есть объекты могут вести себя немного по-разному каждый раз, что отчасти объясняет, почему Genie 3 может поддерживать максимум несколько минут непрерывного взаимодействия за раз. Генерация мира в Genie 3 имеет тенденцию отклоняться от заданных параметров, что, вероятно, приводит к нежелательным результатам.
Поэтому, хотя вряд ли мы увидим VR-версию этого в ближайшем будущем, я рад видеть первые шаги на пути к тому, куда это может в конечном итоге привести. Мысль о возможности на лету, в стиле голодека, создавать мир, который я смогу исследовать — будь то прошлое, настоящее или любая вымышленная история по моему выбору — кажется мне гораздо интереснее с точки зрения обучения.
Одно из моих наиболее часто используемых VR-приложений на сегодняшний день — Google Earth VR, и я могу только представить себе более детальную и яркую версию этого приложения, которая поможет мне изучать иностранные языки, путешествовать во времени и виртуально путешествовать по миру.
Однако, прежде чем мы дойдём до этого, существует реальная вероятность того, что интернет будет заполонен «игровым хламом», что похоже на перепродажу ресурсов в крайнем случае. Это также, вероятно, столкнёт разработчиков игр с теми же трудностями, с которыми сейчас сталкиваются другие цифровые художники, когда дело доходит до сэмплирования ИИ и воссоздания защищённых авторским правом произведений — хотя и на совершенно новом уровне (GTA VI, кто-нибудь помнит?).
Кроме того, меня не покидает ощущение, что будущее складывается очень странным, но, надеюсь, очень интересным и не совсем ужасным местом. Я могу представить будущее, в котором фотореалистичные, управляемые ИИ среды будут идти рука об руку с интерфейсами мозг-компьютер (BCI) — двумя темами, которые Valve исследует уже много лет — и предложит виртуальную реальность, которую я действительно жду.