Модели мира

WorldSculpt: модель собирает 3D-сцену из сотен отдельных мэшей по набору кадров

Alaya Lab вместе с Токийским университетом выпустила WorldSculpt — модель, которая по кадрам одной комнаты или улицы строит 3D-копию, где каждый предмет остаётся отдельным объектом. Модель не склеивает сцену в…
Hugging Face
Модели мира

Yume1.5: открытая модель для создания интерактивных миров, управляемая с клавиатуры

Исследователи из Shanghai AI Laboratory и Fudan University опубликовали Yume1.5 — модель для генерации интерактивных виртуальных миров, которыми можно управлять прямо с клавиатуры. В отличие от обычной генерации видео, здесь…
Модели мира

Matrix-3D: открытый фреймворк для генерации всенаправленных исследуемых 3D-миров из одного изображения

Исследователи из Skywork AI, Гонконгского университета науки и технологий представили Matrix-3D — фреймворк для создания полностью исследуемых трехмерных миров из одного изображения или текстового описания. Matrix-3D решает проблему ограниченного поля…
State-of-the-art

X-MeshGraphNet: фреймворк от NVIDIA для физического моделирования на основе графовых нейросетей

Исследователи NVIDIA представили X-MeshGraphNet, новое расширение для MeshGraphNet, которое значительно упрощает создание физических моделей и решает проблемы масштабируемости. Этот фреймворк позволяет создавать сложные физические модели, устраняя зависимость от предварительно сгенерированных…
State-of-the-art

VFusion3D создает 3D-меш из одного изображения, используя модели диффузии видео для обучения

VFusion3D — метод генерации 3D-модели из одного изображения, который использует модели диффузии видео, чтобы избежать нехватки данных для обучения. Благодаря дообучению предобученной модели видео-диффузии, VFusion3D генерирует масштабные синтетические наборы данных…
State-of-the-art

NVIDIA FlexiCubes: создание 3D-сеток с помощью гибких параметров

NVIDIA разработала FlexiCubes – метод создания 3D-сеток объектов с помощью гибких параметров. Компания утверждает, что FlexiCubes является инновационным алгоритмом, обеспечивающим высочайшее качество сеток для широкого спектра приложений. Последнее поколение алгоритмов…
State-of-the-art

Модель PACGen переносит объект на новую сцену по текстовой подсказке

Исследователи Университета Висконсин-Мэдисон представили text-to-image диффузную модель PACGen (Personalized and Controllable Text-to-Image Generation) для переноса объекта с изображения на новую сцену, сгенерированную по текстовой подсказке. Для этого требуется подать на…
State-of-the-art

NVIDIA Neuralangelo: высокоточный 3D-рендеринг на основе двумерных изображений

NVIDIA разработала нейросеть Neuralangelo на основе Instant NeRF, генерирующую 3D-модели реальных объектов по нескольким двумерным фотографиям с различных ракурсов. Компания утверждает, что Neuralangelo значительно превосходит аналогичные модели и ускорит разработку…
State-of-the-art

Nvidia представила генератор 3D-модели по текстовому описанию Magic3D

Исследователи из Nvidia 18 ноября представили Magic3D — генератор 3D-модели по текстовому описанию. После ввода текстовой подсказки, например «Синяя ядовитая лягушка, сидящая на кувшинке», Magic3D создает 3D модель с цветной…
Датасеты

Google AI опубликовали датасет для восстановления 3D формы зданий

Исследователи опубликовали датасет с неструктурированными изображениями культурных объектов. Он включает в себя 25 тысяч изображений, каждое из которых содержит информацию о местоположении и наклоне. Данные собирали из открытых источников в…
Новости

C3DPO: нейросеть генерирует 3D модель объекта по размеченному изображению

C3DPO — это нейросеть, которая восстанавливает 3D объект по разметке объекта на изображении. Нейросеть тестировалась на задачах Human3.6M, PASCAL3D+ и Synthetic Up3D против подходов, которые не требуют реальных 3D моделей…
Новости

Нейросеть реконструирует модель объекта в 3D из изображения

Исследователи из Google опубликовали self-supervised алгоритм, который реконструирует 3D модель объекта из изображения. Нейросеть разбивает объект с изображения на составные фигуры и объединяет их в 3D модель объекта.  CvxNets разбивают…
Новости

Нейросеть генерирует 3D-модель из наброска объекта

Нейросеть генерирует 3D-модель объекта на основе его наброска. На вход модель получает эскиз объекта в растровом формате. На выходе генерирует объект на эскизе в 3D. Модель была разработана исследователями из…
Новости

С помощью ИИ разработан стул, требующий минимум материалов

Промышленный дизайнер Филипп Старк представил прочный, устойчивый стул, на который потребовалось минимальное количество материала, созданный с помощью ИИ посредством процесса «очень похожего на разговор». Стул показали на неделе дизайна в…
State-of-the-art

Сеть HoloGAN генерирует вид сбоку и сверху на основе 2D изображения

Группа исследователей предложила unsupervised модель GAN для восстановления 3D представлений из 2D изображений. Модель улучшила state-of-the-art результаты в генерации вида сбоку и сверху для предметов в датасетах Chairs и Cars.…
State-of-the-art

Восстановление 3D-модели волос и головы из видео

Трехмерные модели волос используются в виртуальной и дополненной реальности, видеоиграх, медицинском ПО. Однако создать реалистичную 3D-модель прически трудно даже в контролируемой среде. Исследователи предложили метод решения ещё более сложной задачи…
State-of-the-art

Реконструкция 3D-модели головы по нескольким фотографиям

Алгоритмы, которые восстанавливают 3D-модели головы из плоских изображений, должны учитывать позу, освещение, эмоции, гладкие поверхности лиц, ушей, шеи и, наконец, волос. Сейчас качественная реконструкция возможна в том случае, если входные…
State-of-the-art

DeepWrinkles — нейросеть для создания детальных 3D-моделей одежды

FAIR представляет новый подход под названием «DeepWrinkles» для создания реалистичной деформации одежды. Реалистичное моделирование одежды, как известно, представляет собой сложную задачу, и трудно недооценить её значимость в AR/VR, видеоиграх, виртуальных…
State-of-the-art

Метод 3D-реконструкции волос по одному входному изображению

Воссоздание реалистичной 3D-модели объекта по 2D-данным — непростая и захватывающая задача, которую решают многие исследователи. Процесс создания и рендеринга высококачественной 3D-модели сложен сам по себе, а оценка формы трехмерного объекта по двумерному…