Наука и технологии

Вышла новая Gemini 4 Argon. Она строит реалистичные 3D-симуляции и покадрово анализирует видео

Компания Google представила новую модель искусственного интеллекта Gemini 4 Argon. Модель рисует 3D-объекты, самостоятельно создает файлы для 3D-печати по фотографии и даже обучает роботов по обычным любительским видеороликам. Изучили, на что способна новая система.

Фото: NurPhoto / Contributor / GettyImages

Самое заметное обновление — пространственное мышление модели. Вместо того чтобы скачивать или импортировать готовые 3D-файлы, Argon способна рендерить трёхмерные объекты и сцены исключительно через математические формулы и код.

В одном из тестов модели показали всего один концепт-арт дракона и попросили создать его 3D-модель без использования 3D-редакторов. Argon написала код на чистом Python с использованием математических функций расстояния (SDF), который полностью рендерит дракона в 3D-пространстве с правильными пропорциями со всех ракурсных углов.

Все наши тесты мы делали по одному запросу — вопрос был в том, что модель может делать «из коробки» и без многочасовых бесед с ней.

Сначала мы попросили сгенерировать модель чёрной дыры. Gemini 3.1 в режиме High выдала довольно простую симуляцию. 

А Gemini 4 в режиме High выдала значительно более сложную и детализированную модель, которая учитывала намного больше параметров. К сожалению, первоначальная модель слишком замедляла браузер и пришлось её упростить, но даже упрощённый результат значительно более реалистичен, чем у Gemini 3.1.

Также Argon намного лучше умеет делать 3D-модели для печати по фото. Например, мы загрузили фото стола, чтобы она сгенерировала готовый файл для 3D-принтера. Gemini 3.1 так себе справился с задачей — предложил стол без полок и не учёл форму ножек на фото.

Вариант от Gemini 3.1

Тем временем Argon сразу перерисовал стол со всеми полками и отразил его реальную форму. Также он понял, что ножки имеют неравномерную форму и учёл это при построении модели.

Вариант от Gemini 4

Argon получила способность покадрово анализировать реальные видеозаписи и переносить увиденное в физический мир. Модели показали 20‑секундное любительское видео, где человек бросает мешочек в игре корнхол.

Argon сняла пространственные координаты движения, построила симуляцию и перенесла код на человекоподобного робота Apptronik Apollo, который после этого забросил в мишень семь мешочков подряд в реальной жизни.

Робота у нас нет, но мы протестировали это на видео с бегуном, который сначала бежит быстро, а потом трусцой. Gemini 3.1 построила простенькую симуляцию и, похоже, не анализировала видео покадрово (судя по описанию, которое она дала в чат-боте).

В то время Argon сделал значительно более сложный код, который учитывает значительно больше параметров и позволяет настраивать бегуна интерактивно.

«Наша Нiва» — бастион беларущины

ПОДДЕРЖАТЬ
.

Комментарии

Сейчас читают

Что известно об аресте и заключении сенатора Игоря Сергеева, директора Белорусского цементного завода3

Что известно об аресте и заключении сенатора Игоря Сергеева, директора Белорусского цементного завода

Все новости →
Все новости

Белорусы смогут получать уведомления о штрафах через мобильные приложения банков2

Экскурсоводов обязали знать государственную идеологию и содействовать признанию уникальности белорусской модели10

В Беларуси разрабатывают сервис для заключения договоров онлайн2

Израильские военные убили похитителя Шани Лук16

В Беларуси покажут фильм о главе Theranos, осужденной на 11 лет за крупное мошенничество. Фильм бьет все возможные рейтинги4

В Калининградской области разбился военный самолет Су-30СМ6

У берегов Омана заметили розовых дельфинов. Почему они такого цвета — загадка ВИДЕО2

Зеленский заявил о готовности к мирному соглашению с размежеванием по текущей линии фронта20

В России очередной регион сократил выплаты семьям погибших на войне против Украины4

больш чытаных навін
больш лайканых навін

Что известно об аресте и заключении сенатора Игоря Сергеева, директора Белорусского цементного завода3

Что известно об аресте и заключении сенатора Игоря Сергеева, директора Белорусского цементного завода

Главное
Все новости →

Заўвага:

 

 

 

 

Закрыць Паведаміць