Nvidia представила новый инструмент, позволяющий разработчикам генерировать ИИ-изображения путем предварительного создания трехмерных сцен. Решение с громоздким названием Nvidia AI Blueprint for 3D-guided generative AI уже доступно для скачивания владельцам компьютеров с видеокартами Nvidia RTX 4080 или выше. Технология объединяет программное обеспечение для 3D-моделирования Blender с генератором изображений FLUX.1 от Black Forest Lab.
Пользователи могут создать сцену в Blender, используя трехмерные объекты – здания, растения, животных, транспортные средства, которая служит референсом для создания двухмерного изображения. Идея заключается в том, что ручная настройка позиции обзора или размещения определенных объектов предоставляет больший контроль над мелкими деталями при генерации 2D-изображений по сравнению с использованием только текстовых описаний.
Например, если у вас есть очень конкретное представление о городе – форма и высота зданий, количество деревьев или автомобилей и даже угол обзора, вы можете использовать рабочий процесс Nvidia для создания приблизительной версии в Blender. Генератор изображений FLUX.1 затем использует это как основу, что может быть менее утомительно, чем постоянная корректировка текстовых запросов. При этом 3D-объекты в Blender даже не обязательно должны быть детализированными, так как инструмент использует их только как руководство по компоновке.
Подобный подход не полностью уникален – Adobe в октябре на своем мероприятии MAX анонсировала похожий инструмент под названием Project Concept, который также позволяет пользователям размечать трехмерные сцены для управления генерацией изображений. Однако вариант Adobe все еще находится на экспериментальной стадии и может никогда не быть выпущен для широкой публики.
Источник новости: shazoo.ru
