Инструмент генеративного моделирования визуализирует 2D-эскизы в 3D

Инструмент машинного обучения, разработанный исследователями из Института робототехники Университета Карнеги-Меллона (RI), потенциально может позволить начинающим и профессиональным дизайнерам создавать трехмерные виртуальные модели всего, от индивидуальной домашней мебели до содержимого видеоигр. Pix2pix3d позволяет любому создать реалистичное 3D-представление 2D-эскиза с помощью генеративных инструментов искусственного интеллекта, аналогичных тем, которые используются в популярных приложениях для создания и редактирования фотографий с помощью ИИ. «Цель нашего исследования — сделать создание контента доступным для большего числа людей с помощью машинного обучения и подходов, основанных на данных», — сказал Джун-Ян Чжу, доцент Школы компьютерных наук и член команды pix2pix3d. В отличие от других инструментов, способных создавать двухмерные изображения , pix2pix3d представляет собой условную генеративную модель с поддержкой трехмерной графики, которая позволяет пользователю вводить двухмерный эскиз или более подробную информацию из карт меток, таких как сегментация или карта краев. Затем Pix2pix3d синтезирует трехмерное объемное представление геометрии, внешнего вида и меток, которые можно визуализировать с разных точек зрения для создания реалистичного трехмерного изображения, напоминающего фотографию. «Пока вы можете нарисовать эскиз, вы можете создать свою собственную трехмерную модель», — сказал докторант RI Кангле Денг, который был частью исследовательской группы с Чжу, профессором Девой Рамананом и доктором философии. студент Гэншань Ян. Pix2pix3d был обучен работе с наборами данных, включая автомобили, кошек и человеческие лица, и команда работает над расширением этих возможностей. В будущем его можно будет использовать для разработки потребительских товаров , например, дать людям возможность настраивать мебель для своего дома. И начинающие, и профессиональные дизайнеры могут использовать его для настройки элементов в средах виртуальной реальности или видеоиграх или для добавления эффектов к фильмам. Как только pix2pix3d сгенерирует 3D-изображение, пользователь может изменить его в режиме реального времени, удалив и перерисовав исходный двухмерный эскиз. Эта функция дает пользователю больше свободы для настройки и уточнения изображения без необходимости повторного рендеринга всего проекта. Изменения отражаются в 3D-модели и точны с разных точек зрения. Его функция интерактивного редактирования отличает pix2pix3d от других инструментов моделирования, поскольку пользователи могут быстро и эффективно вносить коррективы. Эта возможность может быть особенно полезна в таких областях, как производство, поскольку пользователи могут легко проектировать, тестировать и настраивать продукт. Например, если дизайнер вводит эскиз автомобиля с квадратным капотом, модель предоставит 3D-рендеринг такого автомобиля. Если дизайнер сотрет эту часть эскиза и заменит квадратную вытяжку на круглую, 3D-модель тут же обновится. Команда планирует продолжить доработку и улучшение этой функции в будущем. Дэн отметил, что даже самый неискушенный пользователь добьется удовлетворительного результата. Модель может генерировать точные выходные данные простого или грубого эскиза. При наличии более точных и подробных данных сегментации или карт краев модель может создать очень сложное трехмерное изображение. «Наша модель устойчива к ошибкам пользователя», — сказал Дэн, добавив, что даже 2D-эскиз, отдаленно напоминающий кошку, создаст 3D-изображение кошки. Исследован...

Читать полный текст на android-robot.com

Опубликовано: 14:55, 09.04.2023

Новость из рубрики: Hi-Tech

Поделиться новостью: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Топ новости часа

12:00, 18 Дек Новосибирцы создали установки для моделирования аварий на АЭС Специалисты Института теплофизики СО РАН разработали линейку установок, которые в лабораторных условиях моделируют аварийные ситуации на атомных элек...

06:00, 23 Авг Разработан первый квантовый микропроцессорный чип для моделирования молекулярной спектроскопии Квантовое моделирование позволяет учёным изучать системы, которые сложны или даже невозможны с использованием классических компьютеров в различных об...

Тюринг-обвес для АУДИ особенности 14:19, 13 Июл Тюринг-обвес для АУДИ — особенности Какой автомобиль относится к классу D и отличается повышенным комфортом? Это Audi А6 модели, которая отличается широкой линейкой двигателей. Для поку...

12:11, 09 Сен IBM представляет базовые модели генеративного искусственного интеллекта Granite Компания IBM представила серию больших языковых моделей (LLM) Granite, которые применяют генеративный искусственный интеллект для решения задач естес...

18:29, 22 Апр Android-Robot: Новости технологий и науки О нашем портале Android-Robot — это ведущий ресурс, посвященный последним новостям в мире технологий и науки. Мы предлагаем тут самую актуальную ин...

17:22, 19 Июл MTS AI выберет лучшие проекты на основе генеративного искусственного интеллекта Генеративный искусственный интеллект можно назвать прорывным изобретением современности, который открывает новые возможности в IT индустрии. Компания...

17:00, 25 Авг Представлена платформа с открытым исходным кодом на основе Python для 2D-моделирования футбола Robocup RoboCup — это международное ежегодное мероприятие, призванное продемонстрировать достижения в области робототехники и искусственного интеллекта (ИИ)....

14:33, 30 Мар Cerebras выпустила семь GPT-моделей для генеративного ИИ под открытой лицензией, обучив их на собственных чипах Американский производитель ИИ-комплексов Cerebras Systems объявил о выходе 7 больших языковых моделей (LLM) на базе технологии Generative Pre-trained...

01:33, 11 Май Самое важное изменение поисковика Google за всю историю? Компания показала интеграцию генеративного ИИ в поиск На прошедшем мероприятии Google I/O компания представила далеко не только новые смартфоны и планшет. Само собой, было множество анонсов, связанных с ...

17:44, 08 Дек 1С: Инструмент для эффективного управления бизнесом У вас есть свой бизнес или вы планируете его открыть? В любом случае, эффективное управление и автоматизация бизнес-процессов являются ключевыми факт...

10:21, 10 Июл Инструмент для растачивания и развёртывания с СМП детали Растачивание и развёртывание деталей является важным процессом в промышленности и машиностроении. Для эффективного выполнения этих операций необходим...

18:22, 31 Мар OpenAI представляет инструмент клонирования голоса OpenAI в пятницу представила инструмент клонирования голоса, который она планирует держать под строгим контролем до тех пор, пока не будут приняты ме...

22:00, 02 Июл Госуслуги.Дом – удобный инструмент для решения бытовых вопросов Госуслуги.Дом — это приложение для собственников жилья в многоквартирных домах. С его помощью удобно решать все вопросы ЖКХ онлайн. Приложение создан...

22:44, 24 Май Какой инструмент купить к открытию дачного сезона Дачный сезон требует от нас немалых усилий и многих подготовительных работ, для которых необходимо иметь под рукой качественный и надежный инструмент...

19:54, 12 Сен ASIC майнер Antminer L7 9500 Mh/s: мощный инструмент для майнинга Современные криптовалютные технологии требуют использования специализированного оборудования для достижения высокой эффективности. Одним из лидеров в...

22:00, 14 Дек Новый инструмент Adobe Photoshop cможет убрать отражения в окнах Компания Adobe представила новый экспериментальный инструмент Reflection Removal (Удаление отражения), который удаляет с фотографий отражения в окнах...

17:44, 25 Июн В России доступен сервис Вомбат Маркетинг — инструмент для работы на маркетплейсах Новый сервис Вомбат Маркетинг открылся для российских предпринимателей. Благодаря ему доступна бесплатная аналитика продвижения бренда на ведущих мар...

10:11, 20 Дек Microsoft выпустила инструмент, исправляющий названия моделей принтеров в Windows 10 и 11 В конце прошлого месяца пользователи начали жаловаться, что Windows 10 и Windows 11 автоматически устанавливают приложение HP Smart из Microsoft Stor...

15:44, 20 Янв Microsoft Edge Canary получил обновлённый инструмент «Снимок экрана» с ИИ и OCR В актуальных сборках Microsoft Edge для канала Canary значительно обновился инструмент для быстрого и удобного создания скриншотов. Отныне эта функци...

12:22, 03 Авг Microsoft случайно опубликовала инструмент для включения скрытых функций в Windows 11 Microsoft случайно опубликовала инструмент под названием «StagingTool», который позволяет инженерам и тестировщикам включать находящиеся в разработке...

08:33, 21 Ноя Новый инструмент расшифровывает нервную активность с помощью движений лица Мыши всегда в движении. Даже если для их действий нет внешней мотивации (например, кошка, скрывающаяся в нескольких футах от нас), мыши постоянно раз...

18:00, 22 Июл Microsoft выпустила инструмент для восстановления устройств с Windows, затронутых обновлением CrowdStrike Компания Microsoft опубликовала инструмент, позволяющий IT-специалистам быстрее восстановить работу компьютеров под управлением Windows, на которых в...

10:44, 04 Июл Ваш ход, разработчики. Новый инструмент Apple помогает легко портировать любые игры на iOS В прошлом году Apple предоставила разработчикам новый набор инструментов для переноса игр с Windows на macOS. Это частично поспособствовало релизу не...

15:33, 12 Апр Новый инструмент обеспечивает простой способ отладки предметно-ориентированного языка программирования Новый программный инструмент обеспечивает более простой способ отладки любого предметно-ориентированного языка программирования. Где-то в 2019 году д...

13:22, 31 Мар Разрабатывают инструмент на основе искусственного интеллекта, открывающий путь к персонализированному лечению рака В продолжающейся борьбе с раком ученые всего мира изучают инновационные подходы, позволяющие раскрыть тайны иммунной системы человека — сложной сети ...

20:00, 08 Авг Андронов об уходе западных лиг с российского ТВ: «От этого Кремль ничего не изменит. У нас неспортивная страна, как инструмент это не работает» – О потере какого спорта на «Виасате» больше всего жалеете? – Об американском футболе, конечно. – Что вы испытали? – А это уже не первый уход. НХЛ во...

14:22, 19 Ноя Джокович о поражении от Синнера на групповом этапе: «Это отличный инструмент для подготовки. Я понимаю, что нужно исправить, чтобы победить» На групповом этапе он проиграл итальянцу 5:7, 7:6(5), 6:7(2). – У вас 16 лет разницы в возрасте с Карлосом, а завтра будет 14 лет с Янником. – Спасиб...

10:44, 03 Янв Bunzz запускает инструмент аудита смарт-контрактов на базе искусственного интеллекта с бесплатным аудитом для первых 20 проектов [ПРЕСС-РЕЛИЗ – Сингапур, Сингапур, 3 января 2024 г.] Bunzz pte ltd (Сингапур), оператор инфраструктуры разработки Web3 «Bunzz», объявил о выпуске отк...