3d Моделирование / Нейросети и глубокое обучение

X-MeshGraphNet: фреймворк от NVIDIA для физического моделирования на основе графовых нейросетей

27 ноября 2024

Illustration of the partitioning scheme with Halo on a Koenigsegg car.

X-MeshGraphNet: фреймворк от NVIDIA для физического моделирования на основе графовых нейросетей

Исследователи NVIDIA представили X-MeshGraphNet, новое расширение для MeshGraphNet, которое значительно упрощает создание физических моделей и решает проблемы масштабируемости. Этот фреймворк позволяет создавать сложные физические модели, устраняя зависимость от предварительно сгенерированных…

VFusion3D создает 3D-меш из одного изображения, используя модели диффузии видео для обучения

10 августа 2024

VFusion3D создает 3D-меш из одного изображения, используя модели диффузии видео для обучения

VFusion3D — метод генерации 3D-модели из одного изображения, который использует модели диффузии видео, чтобы избежать нехватки данных для обучения. Благодаря дообучению предобученной модели видео-диффузии, VFusion3D генерирует масштабные синтетические наборы данных…

Unique3D генерирует 3D сетку из одного изображения за 30 секунд

27 июня 2024

Unique3D генерирует 3D сетку из одного изображения за 30 секунд

Unique3D — это state-of-the модель для генерации 3D сеток по одному изображению. Код и веса Unique3D доступны в открытом доступе. Этот подход создает детализированные и согласованные 3D модели менее чем…

NVIDIA FlexiCubes: создание 3D-сеток с помощью гибких параметров

13 августа 2023

NVIDIA FlexiCubes: создание 3D-сеток с помощью гибких параметров

NVIDIA разработала FlexiCubes – метод создания 3D-сеток объектов с помощью гибких параметров. Компания утверждает, что FlexiCubes является инновационным алгоритмом, обеспечивающим высочайшее качество сеток для широкого спектра приложений. Последнее поколение алгоритмов…

Модель PACGen переносит объект на новую сцену по текстовой подсказке

7 июля 2023

Модель PACGen переносит объект на новую сцену по текстовой подсказке

Исследователи Университета Висконсин-Мэдисон представили text-to-image диффузную модель PACGen (Personalized and Controllable Text-to-Image Generation) для переноса объекта с изображения на новую сцену, сгенерированную по текстовой подсказке. Для этого требуется подать на…

NVIDIA Neuralangelo: высокоточный 3D-рендеринг на основе двумерных изображений

4 июня 2023

NVIDIA Neuralangelo: высокоточный 3D-рендеринг на основе двумерных изображений

NVIDIA разработала нейросеть Neuralangelo на основе Instant NeRF, генерирующую 3D-модели реальных объектов по нескольким двумерным фотографиям с различных ракурсов. Компания утверждает, что Neuralangelo значительно превосходит аналогичные модели и ускорит разработку…

Nvidia представила генератор 3D-модели по текстовому описанию Magic3D

23 ноября 2022

Nvidia представила генератор 3D-модели по текстовому описанию Magic3D

Исследователи из Nvidia 18 ноября представили Magic3D — генератор 3D-модели по текстовому описанию. После ввода текстовой подсказки, например «Синяя ядовитая лягушка, сидящая на кувшинке», Magic3D создает 3D модель с цветной…

Monster Mash: инструмент для 3D-анимации на основе скетча

15 сентября 2020

Monster Mash: инструмент для 3D-анимации на основе скетча

Monster Mash — это фреймворк для 3D-анимации персонажа на основе скетча. На вход системе подаётся 2D скетч объекта, на выходе получаем к использованию 3D сетку. Преимущество метода по сравнению с…

Google AI опубликовали датасет для восстановления 3D формы зданий

7 апреля 2020

Google AI опубликовали датасет для восстановления 3D формы зданий

Исследователи опубликовали датасет с неструктурированными изображениями культурных объектов. Он включает в себя 25 тысяч изображений, каждое из которых содержит информацию о местоположении и наклоне. Данные собирали из открытых источников в…

C3DPO: нейросеть генерирует 3D модель объекта по размеченному изображению

29 октября 2019

C3DPO: нейросеть генерирует 3D модель объекта по размеченному изображению

C3DPO — это нейросеть, которая восстанавливает 3D объект по разметке объекта на изображении. Нейросеть тестировалась на задачах Human3.6M, PASCAL3D+ и Synthetic Up3D против подходов, которые не требуют реальных 3D моделей…

Нейросеть реконструирует модель объекта в 3D из изображения

23 сентября 2019

Нейросеть реконструирует модель объекта в 3D из изображения

Исследователи из Google опубликовали self-supervised алгоритм, который реконструирует 3D модель объекта из изображения. Нейросеть разбивает объект с изображения на составные фигуры и объединяет их в 3D модель объекта. CvxNets разбивают…

Нейросеть генерирует 3D-модель из наброска объекта

13 июля 2019

Нейросеть генерирует 3D-модель из наброска объекта

Нейросеть генерирует 3D-модель объекта на основе его наброска. На вход модель получает эскиз объекта в растровом формате. На выходе генерирует объект на эскизе в 3D. Модель была разработана исследователями из…

С помощью ИИ разработан стул, требующий минимум материалов

19 апреля 2019

kartell_starck_autodesk_ai_chair_salone_del_mobile_dezeen_2364_col_1

С помощью ИИ разработан стул, требующий минимум материалов

Промышленный дизайнер Филипп Старк представил прочный, устойчивый стул, на который потребовалось минимальное количество материала, созданный с помощью ИИ посредством процесса «очень похожего на разговор». Стул показали на неделе дизайна в…

Сеть HoloGAN генерирует вид сбоку и сверху на основе 2D изображения

8 апреля 2019

Сеть HoloGAN генерирует вид сбоку и сверху на основе 2D изображения

Группа исследователей предложила unsupervised модель GAN для восстановления 3D представлений из 2D изображений. Модель улучшила state-of-the-art результаты в генерации вида сбоку и сверху для предметов в датасетах Chairs и Cars.…

Восстановление 3D-модели волос и головы из видео

6 ноября 2018

Восстановление 3D-модели волос и головы из видео

Трехмерные модели волос используются в виртуальной и дополненной реальности, видеоиграх, медицинском ПО. Однако создать реалистичную 3D-модель прически трудно даже в контролируемой среде. Исследователи предложили метод решения ещё более сложной задачи…

Реконструкция 3D-модели головы по нескольким фотографиям

18 октября 2018

Реконструкция 3D-модели головы по нескольким фотографиям

Алгоритмы, которые восстанавливают 3D-модели головы из плоских изображений, должны учитывать позу, освещение, эмоции, гладкие поверхности лиц, ушей, шеи и, наконец, волос. Сейчас качественная реконструкция возможна в том случае, если входные…

DeepWrinkles — нейросеть для создания детальных 3D-моделей одежды

28 августа 2018

DeepWrinkles — нейросеть для создания детальных 3D-моделей одежды

Facebook AI Research представляет новый подход под названием «DeepWrinkles» для создания реалистичной деформации одежды. Реалистичное моделирование одежды, как известно, представляет собой сложную задачу, и трудно недооценить её значимость в AR/VR,…

Метод 3D-реконструкции волос по одному входному изображению

10 июля 2018

3D Hair Reconstruction Out of a Single Image

Метод 3D-реконструкции волос по одному входному изображению

Воссоздание реалистичной 3D-модели объекта по 2D-данным — непростая и захватывающая задача, которую решают многие исследователи. Процесс создания и рендеринга высококачественной 3D-модели сложен сам по себе, а оценка формы трехмерного объекта по двумерному…