Картинки и видео с ИИ

Tripo обновила риггинг и анимацию в Tripo Studio. 

Статичному 3D-персонажу можно автоматически добавить скелет, описать движение словами и экспортировать модель с анимацией.

Что нового:

• Риггинг всего тела с поддержкой костей кистей.

• Пять пресетов: UE5 Mannequin, Mixamo, VRM 1.0, Unity Humanoid и ActorCore.

• Text to Motion - анимации на 1-10 секунд по текстовому описанию.

• Multi-stage Motion - последовательности из пяти сегментов: например, пройти, повернуться, разбежаться, прыгнуть и приземлиться.

Типо в Трипо теперь меньше ручной подготовки между генерацией персонажа и проверкой его в движке. Выбираешь нужный скелет заранее, чтобы потом меньше возиться с сопоставлением костей.

Правда, "game-ready" всё ещё не означает "кнопка фпрод". Tripo предупреждает о возможных проблемах с деформациями и движением. Исправлять веса придётся в Blender или Maya.

Лимит для гуманоидного рига - 100 000 треугольников, исходная поза - T или A. Риг стоит 20 кредитов, генерация одной анимации - ещё 20. Движения из готовой библиотеки бесплатны.

Меня немного подрывает на двух вещах.

Какой вменяемый риггер будет использовать A-позу? Это смертный грех во все времена.

Вторая мысль, она более пространная. Я с недоумением смотрю, сколько у нас расплодилось директоров, тут, кстати, недавно Грок-директор анонсировали. Также я смотрю, как зумеры строчат веб-интерфейсы для монтажа. А теперь вот наблюдаю ещё, что они с нуля изобретают риг и анимацию для бедных. В попытках набрать аудиторию, стартапы, чо.  

Ребятки, для монтажа, анимации, рига, композа и 3D есть уже взрослые софты с огромной юзер базой. Вам с ней никак не тягаться и тем более к себе не переманить. Всё, что вам надо, это писать удобные плагины и интеграции с Премьером, Афтером, Резолвом, Блендором, Майей, Нюком, Синькой и на худой конец с Миксамо. Именно там конская юзер база, от которой вы можете отщипнуть свой маленький кусочек.  

Ссылки:
https://www.tripo3d.ai/blog/rigging-animation

https://www.tripo3d.ai/product-doc/module-post-processing/rigging-animation

https://studio.tripo3d.ai/

@cgevent

Источник

✏️ Ideogram запустили ИИ-редактор векторных изображений. Новая модель генерирует SVG-картинки и позволяет точечно их править, причем не сбивается даже после многих правок подряд.

Также можно перевести обычную картинку в вектор с помощью ИИ и дорабатывать уже ее форму и цвета.

➡️ Попробовать можно здесь.

Источник

Kimi готовит K3.1

Moonshot AI опубликовала у себя в X тизер новой версии. Намекают на большой буст в генерации 3D-сцен и анимации.

Ждем сегодня?

Источник

👨‍💻 ИИ-сервис Билайна beeGPT признали лидером по удобству доступа к искусственному интеллекту — он получил 90,12 из 100 баллов.

beeGPT совмещает возможности ИИ-поиска, генерации картинок, музыки и видео, работу с кодом и презентациями. Под каждую задачу сервис сам подбирает лучшую модель.

➡ Попробовать можно здесь. Работает через веб и мобильное приложение Билайна — бесплатно с любыми операторами и без VPN.

Источник

Corridor Crew: выпустили CorridorKey 2, обновлённую версию своего инструмента для удаления зеленого/синего экрана. Сработает даже там, где хромакея нет.

CorridorKey 2 принимает на вход видео и прогнозирует маску (matte) + чистый передний план для каждого кадра, с возможностью использования подсказок (белое — остаётся, черное — вырезается), указывающих, какой именно объект нужно изолировать.

Есть три варианта подсказок:
* No Hint: модель под капотом сама решает, что вырезать, а что оставить.
* First-Frame Hint: когда есть подсказка в виде первого кадра.
* Full Hint Video: когда есть подсказка в виде полного видео для каждого кадра

Инструмент поддерживает HDR и может экспортировать последовательности кадров в формате OpenEXR с линейным цветовым пространством сцены (scene-linear).

В отличие от первой версии, CorridorKey 2 научился работать в исходном разрешении видео и получил мощную временную стабилизацию за счет наложения окон Ханна, что убирает неприятное мерцание по краям маски.

Инструмент больше не полагается на одну модель. Он комбинирует предсказания сразу трех базовых нейросетей: C-RADIOv4 от NVIDIA, MoGe-2 от Microsoft и RVM от Google DeepMind.

Как итог, повысилась точность обработки фрагментов в сложных сценах, где есть окклюзии, волосы и шерсть, полу-прозрачные вещи, расфокус и блюр, или объект и фон сливаются.

Для работы нужна видюха rtx 30-й серии или новее с 4 ГБ VRAM для 2к футажа и 6 ГБ VRAM для 4к. Можно запустить на Windows и Linux. Код на гитхабе, веса на хаггинге.

Есть плагины для Davinci, Nuke, AE + PP, и Blender на Windows и Mac (бета). Linux в планах. Также в наличии отдельное приложение.

Можно свободно использовать для коммерческих проектов.

YouTube
Сайт
Гитхаб
Хаггинг

Источник

Canva бахнула Craft - собственную модель для генерации изображений с пониманием дизайна.

Это интересно, потому что я сейчас пытаюсь верстать PDF для плакатов с использованием Google App/Agy или ChatGPT Work. И это, конечно, плачевно. 

Пишите лайфхаки для такой задачи. 

А Canva решила выйти за рамки обычных генераторов и выпустила собственную хитровыдуманную.  модель Craft, разработанную с нуля командой Canva Research.

Главное отличие - модель сначала проектирует композицию и только потом генерит изображение. На первом этапе она определяет расположение объектов, пропорции, визуальную иерархию и надписи. На втором - превращает этот план в готовую графику.

Такой подход ориентирован не просто на Сделать красиво, а на создание осмысленных дизайнерских макетов: рекламных материалов, постеров, обложек, иллюстраций и других коммерческих визуалов.

Что умеет Craft:

• Генерирует изображения до 2K с поддержкой более 30 соотношений сторон.

• Работает с многоязычными запросами и надписями на 55 языках.

• Позволяет корректировать отдельные элементы композиции.

• Интегрируется с Magic Layers, чтобы превращать результат в редактируемые слои Canva.

В этом смысле Craft ближе к Recraft и Ideogram, которые тоже делают акцент на графическом дизайне, типографике и управляемости результата, а не только на фотореализме.

Но подходы различаются. Recraft специализируется на профессиональной графике и визуальной стилистике, Ideogram активно развивает работу с текстом и только что бахнул генератор настоящих SVG, а Canva пытается объединить генерацию с полноценным редактором макетов. Ключевое слово - редактором. 

По заявлению Canva, Craft заняла четвёртое место (вяло как-то) в общем рейтинге DesignArena и лидирует в отдельных категориях. 

Модель уже доступна в Canva Dream Lab и через API. 

Локального запуска нет. В дальнейшем обещают ускоренные версии Craft-fast и Craft-ultrafast.

Закос в дизайн интересен. Особенно если будет промежуточный результат, который можно редактировать. 

https://www.canva.com/newsroom/news/canva-craft/

https://www.canva.com/newsroom/news/introducing-canva-research/

https://www.designarena.ai/leaderboard/image

@cgevent

Источник

Ideogram бахнул Vector 1.0

Настоящие SVG-файлы с редактируемыми контурами, фигурами, цветами, градиентами и типографикой.

Что умеет Vector 1.0:

• Text-to-Vector - создание логотипов, иллюстраций, надписей и сложных композиций непосредственно из текстового промпта.

• Image-to-Vector - преобразование готовых растровых изображений в масштабируемую векторную графику.

• Редактирование - отдельные фигуры можно перемещать, вращать, масштабировать и перекрашивать.

• API - обе функции доступны разработчикам.

Стоимость через API: от $0.13 до $0.20 за генерацию SVG, до $0.32 при высоком качестве с референсами. Векторизация готового изображения - $0.10.

Надо тестировать. 

Шоуконкурентов?

• Recraft V4.1 Vector - один из главных конкурентов. Тоже генерирует настоящие SVG из текста, умеет векторизовать растровые картинки. Более того, у Recraft уже есть собственный векторный редактор, в котором можно менять даже отдельные опорные точки кривых. Цена V4.1 Vector через API - $0.08 за генерацию, а V4.1 Pro Vector - $0.30.

• QuiverAI Arrow 2 / Arrow 2 Telos - специализированные модели для генерации, редактирования и векторизации SVG. Умеют работать с референсами, изменять готовые SVG по текстовым инструкциям и даже создавать векторную анимацию. Особенно интересны своим подходом к непосредственной генерации векторного кода.

• Adobe Firefly / Illustrator - генеративная векторная графика из текстовых запросов, включая Text to Vector Graphic и Generative Shape Fill. Главное преимущество - интеграция с Адобченко.

• Kittl AI Vector Generator - генерация редактируемых SVG из промптов с последующей доработкой в собственном дизайн-редакторе.

• VectorArt.ai - генерация векторных иллюстраций, логотипов и иконок с экспортом SVG.

Есть и открытые модели:

• OmniSVG 1.1 - семейство моделей на 4B и 8B параметров, способных генерировать SVG из текста и изображений. Код и веса опубликованы, лицензия Apache 2.0.

• StarVector - открытые модели 1B и 8B для генеративной векторизации изображений. Особенно хорошо подходят для иконок, логотипов и диаграмм, но не предназначены для обычных фотографий.

И что на итоге?

Главное отличие всех этих решений от традиционной автотрассировки вроде Potrace - использование генеративных моделей, которые могут создавать или реконструировать векторную композицию, а не просто обводить границы пикселей.

Получить SVG-файл и получить компактный, аккуратно структурированный, действительно удобный для редактирования SVG - разные вещи.

Кстати, Ideogram сама признаёт, что автоматическая группировка фигур по слоям пока не реализована.

Кто-то вообще юзает векторизаторы? Напишите в комментах какие. 

Ссылки:

Ideogram Vector 1.0:
https://ideogram.ai/models/vector/

Recraft:
https://www.recraft.ai/ai-vector-generator

QuiverAI:
https://quiver.ai/

Adobe Firefly:
https://www.adobe.com/products/firefly.html

Kittl:
https://www.kittl.com/tools/vector-generator

VectorArt:
https://vectorart.ai/

OmniSVG:
https://github.com/OmniSVG/OmniSVG

StarVector:
https://starvector.github.io/

@cgevent

Источник

Монтажеры больше не нужны!*

Увольняем пацанов и девчонок, кароч.

Следующий видос собран связкой Claude Code + DaVinci + Claude Desing.

В первый раз всё заняло больше времени, чем по идее должно. Но сделать 40+ врезок графики и анимации, с подбором скринов, рефов, базовой покраской видео реально просто командой «Ну смонтируй там чё по смыслу».

Ролик сейчас рендерится, в обед залью. Шок, просто шок.

*утрирую, конечно, но большая часть рынка сделает хуже или на уровне того, как намонтировала мне нейронка. Теперь интересно проверить монтаж с двух камер + повысить сложность задач.

Заводите каналы в mave

Источник

🏎️ Рисуем гоночную трассу от руки и гоняем по ней с корешами.

Энтузиаст создал игру, в которой можно самостоятельно нарисовать контур будущей трассы или обвести готовую картинку и превратить ее в гоночный трек.

Встроенная нейронка сама добавит бордюры, холмы и другие детали окружения. Остается только выбрать тачку и давить на газ.

Снимаем стресс после тяжелого рабочего дня — тут

@bugfeature | #полезно

Источник

#Нейропрожарка

«Вкусно как в сказке»

Автор: режиссер Женя Пырьев

Инст: @zhenyapyrev
Щи Продакшен

Как собрать большой сказочный мир и сохранить его убедительным?

Начали с героев. Кощей, Баба-яга, Водяной и Змей Горыныч знакомы каждому с детства, поэтому важно было сохранить их узнаваемость, но показать по-новому.

ИИ использовали для создания персонажей, локаций и сложных фэнтезийных образов. Самое сложное — собрать всё в единый визуальный стиль, а не получить набор разрозненных генераций.

Чтобы мир выглядел живым, много работали с деталями. Изучали архивные материалы и фильмы, прорабатывали архитектуру, окружение, одежду и предметы внутри сцен.

Для озвучки пригласили профессиональных актёров дубляжа. Голос помог добавить героям характер и сделать их живее.

Брендинг тоже встроили внутрь мира: магазин, зелёный стакан и другие детали стали частью истории.

В таких проектах мало просто красивого кадра. Важно собрать персонажей, локации и детали в один цельный мир.

В 4К: Vimeo

@cgevent

Источник