Нейросети для создания 3D-моделей

Нейросети для создания 3D-моделей

109749
6
Время чтения: 6 минут
Содержание

Рисунками нейросетей уже никого не удивишь, а вот 3D-объектами — вполне. Оказывается, нейронки научились по фото и видео создавать трехмерные модели. Навык полезный, для бизнеса применимый. Я протестировала 5 таких сервисов. Сейчас покажу, где создать трехмерную модель за пару кликов.

А если с нейросетями разобрались, изучите нашу OkoCRM. Она 3D-объекты не строит, зато лихо автоматизирует продажи. Попробуйте, это бесплатно.

OkoCRM в Telegram
Подпишитесь на наш канал. Там полезные инструменты продаж и новости команды OkoCRM.
Перейти в канал OkoCRM

Что такое 3D модель

3D-модель — это объемное изображение некого объекта. Чтобы его получить, в специальной программе строят пересекающиеся плоскости по трем осям. Далее накладывают текстуры, свет и анимацию. Получается реалистичный объект, который можно расположить в пространстве как угодно.

Пример 3D объекта в программе Blender.

Процесс по построению трехмерных объектов называют 3D-моделированием. Занимаются им специалисты по моделированию и за работу берут большие деньги. Но если бюджетов особо нет, выручат нейронные сети. Они создадут модели не хуже по фото, видео и даже текстовым описаниям. Где-то придется заплатить за подписку, а другие все сделают бесплатно.

Я создала с десяток 3д-моделей с помощью нейросетей и могу сказать — они ничем не отличаются от нарисованных вручную. Их также можно использовать в играх, AR, 3D-печати, презентациях, на сайте или в рассылках.

Кстати, последние можно настроить в OkoCRM. Работают они, правда, не на искусственном интеллекте, но автоматически и без участия менеджеров.

В каких нейросетях можно создать 3D-объект

1. MagiScan 3d

Результат: ⭐⭐ ⭐⭐

Сложность использования: ❌ ❌

Стоимость: 0,03$ за одну модель

Нейросеть работает через приложение. Качаете на смартфон, включаете камеру, обходите реальный объект по кругу — получается видео. Сохраняете, и нейронка создает из видеофайла 3D-объект.

Нейросеть создает 3д-модели по видео.

Приложение работает на iPhone 10, 11, 12, 13, 14, Pro и Pro Max, iPad и Android. Готовую 3D модель можно скачать и использовать где угодно: для 3D-печати, разработки игр, презентаций.

Чтобы получить объемную модель, в приложении есть два режима сканирования:

  • 360° wheel. Надо просто обойти объект и снять его камерой по кругу
  • Semisphere. Объект как бы накрываете неким виртуальным куполом, а потом обходите по кругу и кликаете на каждую виртуальную грань купола. Если не понятно, смотрите на моем примере

Я решила сделать 3D модель вот такой фигуры для декора.

Испытуемый образец для MagiScan 3d.

Поместила фигурку на табурет рядом с окном и обошла со смартфоном по кругу. На гифке виден и тот самый виртуальный купол, и как я тапаю его грани, чтобы они стали зелеными.

Процесс сканирования объекта в режиме semisphere.

Как только весь купол станет зеленым, приложение начинает генерировать 3D модель. У меня вышло вот что. Не идеально, но, видимо, надо попрактиковаться.

У готовой модели можно посмотреть грани или переключить на режим AR, чтобы прикинуть через экран смартфона, как отсканированную фигурка смотрится на полке или в саду.

ПлюсыМинусы
Есть три пробных сканирования, можно протестировать приложение бесплатноРаботает не через пару кликов. Придется повозиться: обойти объект со смартфоном
Можно получить 3D модель любого физического объектаЕсть ограничения. Например, не получиться сканировать прозрачный объект, при плохом освещении и который нельзя обойти — например, картины

2. Ponzu

Результат: ⭐

Сложность использования:

Стоимость: бесплатно

Ponzu — это нейронка, которая создает 3D-текстуры по текстовым описаниям. Работает элементарно: пишите на английском описание и получаете свою текстуру.

Я набрала: «green stone with wet», то есть мокрый зеленый камень. Вот что мне сгенерировала Ponzu.

Если нужны 3D-текстуры, дешево и сердито за ними только в Ponzu.

Можно поменять стилистику, например, с фотореалистичного стиля переключиться на акварельный или стимпанк — это как хотите.

ПлюсыМинусы
Быстро работает — набрали текст, и текстуры готовыНа английском. Русские описания нейронка не понимает
БесплатноПодходит только для текстур

3. 3Dpresso

Результат: ⭐⭐ ⭐ ⭐ ⭐

Сложность использования: ❌ ❌

Стоимость: бесплатно

3Dpresso создает трехмерные модели из видео. Принцип схож с MagiScan 3d, только снятое видео загружаете не на смартфон, а переносите в веб-версию нейросети. Дальше искусственный интеллект вычленяет объект и создает трехмерную модель.

Я взяла такую фигурку, обошла вокруг нее с включенной на смартфоне камерой, а видео загрузила на 3Dpresso.

Испытуемый образец для 3Dpresso.

Платформа что-то там покрутила, подумала и выдала мне такую трехмерную модель:

Модель можно скачать на компьютер — правда, пока в одном разрешении *.glb, либо поделиться на нее ссылкой.

ПлюсыМинусы
Можно получить трехмерную цифровую модель любого реального объектаМожно отсканировать только то, что реально обойти по кругу
Бесплатный доступПопадают посторонние объекты — в моем случае часть табуретки

4. Meshcapade

Результат: ⭐⭐ ⭐⭐

Сложность использования:

Стоимость: от 5000 € за год

На Meshcapade можно за пару нажатий создать 3D-аватар или трехмерного персонажа — достаточно загрузить одно фото. Причем платформа отмечает, что справиться с задачей, даже если поза человека на фотографии сложная.

Я проверила. Взяла свою фотографию с динамичной позой. Вот такую:

Испытуемый образец для Meshcapade.

Далее загрузила на Meshcapade, и за доли секунд получила свой трехмерный аватар.

3D-аватар по фотографии от нейросети Meshcapade.

Скачала 3D-объект на компьютер. Вполне нормальная моделька. К Meshcapade вопросов нет, работает достойно.

Трехмерный объект, который создала Meshcapade.

Еще прикольно, что платформа создает аватар не только по фото, но и стандартный — когда руки-ноги по швам. Такой аватар можно открыть во встроенном редакторе и подправить: например, увеличить рост, длину рук, ширину плеч.

Онлайн-редактор Meshcapade, в котором можно подправить фигуру и пропорции аватара.

ПлюсыМинусы
Нейросеть генерирует 3d модели по одному фотоВажен фон. Если на фоне аляповатые пятна, нейронка может неверно распознать на фото человека и выдать неудачный вариант
Генерирует даже сложную позу
 Создает только туловище — волосы, одежду и прочее надо дорисовывать отдельно

5. Kaedim3d

Результат: ⭐⭐ ⭐⭐ ⭐

Сложность использования:

Стоимость: $150 в месяц

Нейросеть Kaedim3d создает трехмерные модели из двумерных изображений. А то, что получается на выходе, очень похоже на объекты, которые создают профессиональные дизайнеры в графических пакетах вроде Blender и CINEMA 4D.

Пример трехмерной модели созданной по двумерной картинке.

Судя по всему, работать в Kaedim3d нетрудно: загружаете картинку и нейросеть создает по модель. Но проверить не смогла, доступ только платный.

ПлюсыМинусы
Нейросеть, которая делает 3d-модели как профессиональные дизайнерыТолько платный доступ
Чтобы получить модель, нужна одна 2d-картинка
OkoCRM в Telegram
Только польза про OkoCRM. Обновления, новости, инструменты продаж и кейсы клиентов. Иногда шутим, но не сильно =)
Подписаться

Выход каких нейросетей ждем в будущем

Spline AI

Нейросеть пока на стадии тестирования, но планируется, что после официального релиза сможет преобразовывать в трехмерные объекты текстовые описания. Прикольная фича — к объектам можно будет добавить даже анимацию.

Скажите какой объект нужен, с какими углами, толщиной, положением, и Spline AI построит объект автоматически.

Masterpiece Studio

Нейросеть от Masterpiece Studio пока тоже тестируется, но по задумке будет преобразовывать текст в 3D-объекты и анимацию. Например, если ввести слова «гитара», ИИ создаст модель гитары, а детали ее внешнего вида можно будет уточнит через дополнительные текстовые описания.

Пример созданного в Masterpiece Studio анимированного трехмерного персонажа.

RODIN Diffusion

Это нейросеть от Microsoft. По фото создает 3D-аватар человека — именно лицо со всеми особенностями мимики. Известно, что нейросети можно будет подсказывать с словами, как добиться от аватара максимального сходства с фото.

Трехмерные аватары человека от RODIN Diffusion обладают высокой степенью визуального сходства.

Подведем итоги

  1. MagiScan 3d и 3Dpresso создают трехмерные объекты из видео. Только первая на смартфоне, а вторая — в веб-версии
  2. Ponzu за секунду и ноль рублей клепает трехмерные текстуры по текстовым описаниям
  3. Meshcapade возьмет фото человека и создаст его трехмерную модель — правда без волос, мимики и одежды
  4. А Kaedim3d построит трехмерный объект по плоской фотографии. Причем результат не хуже, чем через если бы создавался через Blender или CINEMA 4D
  5. Самые интересные нейросети еще на стадиях альфа и бета-тестирования. Ждем релиз Spline AI, Masterpiece Studio, RODIN Diffusion
Подпишитесь на Telegram OkoCRM
Новости команды OkoCRM, обновления в системе, полезные инструменты для продаж.
Перейти в канал OkoCRM
Наверх
Мы используем cookie для вашего удобства. Используя сайт, вы соглашаетесь с этим. Подробнее - в политике конфиденциальности.
Я согласен