Вышла интересная open-source модель - MiniCPM-o 4.5 — видео, канал «Python/ django» ▶ видео

🚀 Вышла интересная open-source модель - MiniCPM-o 4.5 


MiniCPM-o 4.5 позиционируется как full-duplex omni-modal LLM.  
Проще говоря, модель может:
- одновременно видеть (видео/изображение)  
- слушать (аудио)  
- говорить  
и делать это в реальном времени, без режима "подожди, я сначала дослушаю". Больше похоже на живой диалог, чем на поочередные запросы.
Не только отвечает, но и проявляет инициативу
Заявлена поддержка проактивного поведения - модель может не просто реагировать на вопросы, а, например, сама инициировать напоминания или действия в рамках диалога.
По метрикам
С 9B параметрами модель показывает 77.6 на OpenCompass и, по авторам, обходит GPT-4o и Gemini 2.0 Pro в ряде vision-language задач. Для такого размера это сильный результат.
Практический момент
Главный плюс - это open-source, и всё можно крутить локально на ПК, а не только через облачные API.
https://huggingface.co/openbmb/MiniCPM-o-4_5
Просмотры: 2 768
Открыть в MAX Сообщить о неточности

Репосты публикации

Публикация канала

Сообщить о неточности

Опишите, что нужно исправить. Если есть источник, добавьте ссылку.

Вы покидаете datool.ru

Ссылка ведёт на внешний сайт. datool.ru не отвечает за его содержимое — проверьте адрес, прежде чем вводить пароли или платёжные данные.

Переход через 10 с

Перейти