Компании Intel и Blockade Labs совместно разработали модель машинного обучения LDM3D (Latent Diffusion Model for 3D) для генерации изображений и связанных с ними карт глубины на основе текстового описания на естественном языке. Разработка напоминает систему синтеза изображений Stable Diffusion, но позволяет формировать трёхмерный визуальный контент, такой как сферические панорамные изображения, которые можно просматривать в режиме 360 градусов. С практической стороны модель может применяться в играх и системах виртуальной реальности для интерактивного формирования трёхмерных окружений...Подробнее: https://www.opennet.dev/opennews/art.shtml?num=59325
И кто тут теперь скажет что Blockade Labs не лучший друг опенсорса?
Ага, очередной говнокод подъехал: на сайте у них можно попробовать как оно работает https://huggingface.co/Intel/ldm3d?text=reddish+cat+lying+on...
так вот прям ща получил ошибку: module 'diffusers' has no attribute 'StableDiffusionLDM3DPipeline'
наверное все круто просто их паламали да?
Трудно ожидать от васяна чего-то адекватного ...
сайт иди чини, умник.
только и можете что бюджеты пилить
а как коснется то или не работает или надо переписывать или все уже уволились...
> module 'diffusers' has no attribute 'StableDiffusionLDM3DPipeline'
> наверное все круто просто их паламали да?нет - просто у тебя модуль 'diffusers' не той версии
Карты глубин немного "кривые" что-ли (что-то не так), хотя... в общем-то как и всё, что генерируется нейросетями.
Я бы не сказал…
Привёл бы примеры картинок сгенерированных нейросетями (purplesmart⚫ai), но всё равно пойдёт под удаление.
А так весьма красиво.
Поняш и тут свой понипрон протолкнул. Когда тебя уже забанят перманентно для профилактики?
> примеры картинок (purplesmart⚫ai)О, годнота.
Давайте быстрее 2-ю версию. И чтоб сразу делала ассеты для Unreal Engine!
Работать, бездельники!
Просто отлично. А что мешало раньше сгенирить картинки, а уже к ним карту глубин сетью для оценки карты глубин? И интересно, что модель сгенерит, если её попросят сгенерить треугольник Пенроуза. Для него карты глубин в принципе существовать не может.
>А что мешало раньше сгенирить картинки, а уже к ним карту глубин сетью для оценки карты глубин?Собственно так и делали с SD. Тут видимо просто своя разработка.
> И интересно, что модель сгенерит, если её попросят сгенерить треугольник Пенроуза. Для него карты глубин в принципе существовать не может
Нейросети не ИИ и не на магии работают. На чем и как обучили, то и сделает. Так что на вразумительный результат без примеров и указаний рассчитывать не приходится.
А что человек сгенерит, если его попросят сгенерить треугольник Пенроуза?
Человек не использует карты глубины.
Ну он может взять линейку и ручку, рассчитать всё, но у него тоже мало что получится.
Только вчера наткнулся на princeton-vl/infinigen в трендах гитхаба. Теперь генерация 3д в моде? Как будто кто-то массово задаёт тему мейнстрима. Битки, ИИ картинки, чат-боты... А давайте все разрабатывать реалистичный звуковой движок для игр с трассировкой и т.д.? На звук в играх почему-то все забили.
Давно есть https://learn.microsoft.com/en-us/gaming/acoustics/what-is-a...
И нейросетки для этого не нужны.
проприетарь.
Фанатики прогресса могут пищать от восторга и обмазываться чюдо-ИИ сколько угодно, но держат их за яйца те, кто производит покушать и погреться
Папусы отдадут еду и нефть за бусы - сгенерированные ИИ цифровые развлечения.
Вангую, что уже через месяц весь инет будет завален сгенерированным 3D порно.