AI превръща изображения в интерактивни 3D сцени

Снимка: World Labs

AI превръща изображения в интерактивни 3D сцени

Това може да доведе до революция в гейминг индустрията

12:36 | 3 декември 2024 | Редактор : Стоян Гогов 0 387 Снимка: World Labs

World Labs, стартъпът, основан от известния изследовател в областта на изкуствения интелект Фей-Фей Ли, разкри първия си проект: AI система, която може да генерира 3D сцени, подобни на видеоигри, от само едно изображение.

Много AI системи могат да преобразуват снимка в 3D модели и среди. Но сцените на World Labs са уникални, защото са интерактивни и подлежат на модификация.

"Нашата технология ви позволява да влезете в която и да е снимка и да я изследвате в 3D," пише World Labs в публикация в блога си. "Отвъд входното изображение всичко е генерирано."

Системата на World Labs преобразува изображение в интерактивна, изследваема 3D сцена. AI-сгенерираните сцени, които всеки с клавиатура и мишка може да разгледа в демо на уебсайта на World Labs, изглеждат впечатляващо, макар и леко карикатурно. Те се рендерират в реално време в браузъра и разполагат с управляема камера с регулируема симулирана дълбочина на полето (DoF). Колкото по-силен е ефектът на DoF, толкова по-замъглени изглеждат обектите на заден план.

Системата на World Labs е част от нововъзникваща категория AI, наречена "модели на светове." Много от тези модели могат да симулират игри и 3D среди, но често страдат от артефакти и проблеми с последователността. Например, моделът Oasis на стартъпа Decart, който симулира Minecraft-среда, има ниска резолюция и бързо "забравя" разположението на нивата.

За разлика от това, подходът на World Labs гарантира, че сцените остават непроменени след генериране и следват основните закони на физиката, създавайки усещане за солидност и дълбочина.

Системата на World Labs може също да прилага интерактивни ефекти и анимации към сцените, като промяна на цветовете на обектите и динамично осветяване на фона. Това я отличава като иновативно решение, което предлага нови начини за взаимодействие с дигитални светове.