Код АI разума

Весь AI в одной студии
Все сервисы в одной студии — наша коллективная мечта, превратили ее в реальность!

➡️ AI Studio — новая платформа Сбера для ИИ-экспериментов, на которой можно проверить самую смелую идею, собрать рабочий прототип или полноценного ИИ-агента без навыков программирования

Что умеет сервис?

➕ Сравнивает модели, отправляя запрос сразу нескольким версиям GigaChat, и помогает выбрать ту, что лучше подходит под вашу задачу

➕ Подстраивается под системные инструкции и параметры генерации. Если предоставить модели доступ к документам и внутренним базам знаний, она будет опираться и на них

➕ Распознаёт речь, озвучивает текст, настраивает паузы, ставит ударения и расставляет интонации

➕ Проводит глубокие исследования в открытых источниках, сопоставляет данные и собирает отчёт со ссылками

⚡️ Для создания агента достаточно соединить в визуальном конструкторе нужные блоки: модель, базу знаний, голосовые настройки и сценарии диалога, а затем всё протестировать. Если прототип покажет эффективность, его можно запустить как готовое решение — через API, чат-виджет для сайта или отдельное приложение.

AI Studio позволяет тестировать ИИ-гипотезы без разработки, чем сильно ускоряет процесс. Сервис будет полезен разработчикам, а также продактам, бизнес-аналитикам, корпоративным заказчикам и тем, кто автоматизирует бизнес-процессы. Подробнее про сценарии использования в статье.

Сервис доступен бесплатно и работает с российским IP-адресом ⬇️

👉🏻 Протестировать

👆 Примерно так должны выглядеть планы на день, когда статья на топовые конференции уже готова и отправлена
ㅤ

✅ Здесь рассказывали, как правильно подать заявку
✅ А тут можно прочитать про все этапы сразу
Мария Тихонова

ㅤ
Ожидание ответа по заявке может затянуться на два месяца. За это время участник успевает побывать по обе стороны научного ревью.
ㅤ
ПИСАТЬ РЕВЬЮ

Вас могут привлечь к рецензированию — оценке статей других авторов. Соблазн подключить к этому процессу LLM лучше перебороть — следы ИИ могут обнаружить, и вас накажут. К тому же идея peer review держится на том, что исследователи внимательно читают работы друг друга

ㅤ
ОТВЕЧАТЬ НА РЕВЬЮ

Это шанс повлиять на итоговое решение о принятии, дав рецензентам чёткие ответы на их вопросы (rebuttal). Старайтесь отвечать по делу и спокойно, не принимая критику на свой счёт. Если информация, которую запрашивают, уже есть в статье, просто укажите на нужную часть. Кстати, соглашаться с замечаниями не обязательно!

ㅤ
В ожидании ревью стоит помнить, что рецензенты — обычные люди, поэтому их оценки могут быть субъективны. Если статью всё-таки не приняли, не расстраивайтесь — это шанс сделать её в разы лучше и вернуться с триумфом!
ㅤ
❤️ — давайте уже скорее про финальный этап!

ХАРД-КОР-ОБУЧЕНИЕ ДЛЯ НЕЙРОСЕТЕЙ 🤖
ㅤ
Похоже, системы планирования ИИ скоро ждёт сильный буст. За них взялся Владислав Куренков, руководитель научной группы «Адаптивные агенты» Института AIRI.
ㅤ
Исследователь запустил
открытое сообщество экспертов, чтобы вместе научить ИИ проходить одну из самых сложных игр — NetHack.
ㅤ
В чём суть 👇
ㅤ

• NetHack — прекрасный полигон для обучения ИИ. За одну сессию можно сделать десятки тысяч ходов, у игрока есть всего одна жизнь, нет сохранений, а в каждой партии генерируется новое уникальное подземелье. Ошибка, допущенная несколько тысяч ходов назад, может легко привести к поражению
• Такие условия отлично ложатся на одну из главных проблем ИИ-агентов. Отдельные шаги они выполняют качественно, но с долгосрочным планированием справляются плохо. Обучение в NetHack поможет им развить этот навык

ㅤ
🔥 Подробности читайте в интервью

🤖 5 профессий, где ИИ-агенты появятся первыми

Не думаю, что завтра ИИ массово заменит людей. Скорее произойдёт другое: у специалистов появятся цифровые коллеги, которым отдадут рутину.

💻 1. Программист
Агент получает задачу, изучает проект, пишет код, запускает тесты и исправляет ошибки. Человеку остаются архитектура и контроль.

📈 2. Маркетолог
Анализ рекламы и конкурентов, подготовка контента, поиск идей и отслеживание результатов можно объединить в одного агента.

🔎 3. SEO-специалист
Агент постоянно проверяет сайт, позиции и ошибки, предлагает изменения и часть из них выполняет самостоятельно.

☎️ 4. Менеджер по продажам
ИИ изучает клиента, готовит первое сообщение, напоминает о контакте, обновляет CRM и подсказывает следующий шаг.

📊 5. Аналитик
Вместо ручной сборки десятка отчётов: агент сам собирает данные, ищет отклонения и объясняет, что произошло и почему.

И здесь появляется интересная мысль.

Возможно, конкуренция будущего будет не «человек против ИИ», а «человек с ИИ-агентами против человека без них». 🚀

🕶 ИИ-Агент 007

Агент сказал, что всё сделал. Верим? 🤔
ㅤ
Чтобы понять, действительно ли ИИ справился с поручением, команды AGI NLP и Computer Operator представили
WebPageBench — открытый бенчмарк для оценки работы веб-агентов на 152 повседневных задачах.
ㅤ
Агенты выполняют их на шести русскоязычных моках сайтов 👇
ㅤ

• Покупают товары
• Бронируют отели
• Ищут билеты
• Работают с файлами и корзиной

ㅤ
Так можно отделить ошибки в понимании задания от проблем с конкретной реализацией интерфейса. Большинство существующих бенчмарков использует англоязычные интерфейсы, тогда как WebPageBench работает с русскоязычными 🔥
ㅤ
Все действия агента сайт записывает в лог событий. По нему система определяет, была ли задача выполнена успешно.
ㅤ

Ждать отмашки от самого агента или использовать LLM-судью не нужно.

ㅤ
WebPageBench также проверяет, как агент справляется с разными реализациями одного и того же элемента интерфейса, например календаря, счётчика или выпадающего списка.
ㅤ
В публичном лидерборде
уже 24 связки моделей и обвязок. Проект находится в открытом доступе, его можно запустить локально и добавить собственную модель или обвязку.
ㅤ

Код и инструкции — на GitHub

Представляю вашему вниманию промпт-инжиниринг в виде карточек:

Что внутри карточек: 👆

- Базовые принципы построения промптов;
- Примеры удачных формулировок;
- Советы по уточнению и детализации запросов;
- Лайфхаки для генерации изображений и текстов;

Каждая карточка — это мини-урок, который можно сохранить, переслать коллегам или использовать как шпаргалку в работе. Сохраняйте, делитесь с командой и прокачивайте навыки работы с ИИ

У НЕЙРОСЕТЕЙ ПОЯВИЛОСЬ ЧУВСТВО ВРЕМЕНИ ⏳

При генерации видео нейросети могут создавать красивые кадры, но путаться в скорости происходящего. Команда Kandinsky разработала Time Adapter — лёгкую надстройку из двух блоков, которая помогает управлять временем в сгенерированном ролике.

Один блок отвечает за частоту кадров — от 15 до 60 fps. Другой — за динамику событий в сцене. Вместе они позволяют задавать темп происходящего и делать движения естественнее

При этом модуль, обученный на 40 тысяч видео, занимает меньше 1% от размера основной модели.

Как его использовать 🤔
Есть два варианта: обучать адаптер отдельно и далее подключать к модели или дообучать их вместе.

Что показали тесты 👇🏻
После совместного дообучения с адаптером модель Kandinsky 5.0 Video Lite улучшила показатели на тестовом наборе видео с людьми и природой:

🟣 Естественность движения выросла на 29%
🟣 Визуальное качество — на 8%
🟣 Соответствие текстовому запросу — на 19%

Научная статья о подходе была представлена на ведущей конференции по машинному обучению ICML.

Где пригодится Time Adapter 🤩
С ним можно генерировать ролики без артефактов движения, подбирать темп видео под музыку и монтаж. А ещё создавать физически достоверные синтетические данные для обучения физического ИИ.

👉🏻 Код доступен под лицензией MIT
👉🏻 Научная статья

Муха, которая умеет всё 🪰
ㅤ
В начале сентября Google Research и HHMI Janelia опубликовали подробную карту мозга и нервной системы мухи дрозофилы — больше 166 тысяч нейронов и миллионы связей между ними.
ㅤ
А дальше...
ㅤ

Люди стали придумывать ей работу. Цифровую модель мухи учили играть в DOOM, управлять машинками и торговать криптовалютой

ㅤ
Как это работает?
ㅤ
• Если мы берём игру, например DOOM, то изображение из неё переводят в сигналы для цифровой модели мозга мухи. Работа каждого нейрона, в свою очередь, описывается в ней простой математической моделью
ㅤ
• Нейроны накапливают сигналы и, достигая определённого порога, срабатывают. Их активность превращается в команды: идти, поворачивать или стрелять
ㅤ
• Когда муха-игрок получает урон, модель дополнительно принимает сигнал наказания, который помогает корректировать её поведение
ㅤ
Мы решили, что карьерный потенциал дрозофилы не раскрыт до конца, и придумали, чему ещё её стоит научить 👆
ㅤ
Куда отправим муху после?
ㅤ
🔥 — отдыхать, она заслужила
❤️ — писать за меня код
👍 — подальше от моих котлет
🤔 — расскажите, как запустить свою муху

https://yandex.ru/video/touch/preview/15944802888377005709

https://rutube.ru/video/152bffd3ce8515b8f05f98c2b83b5a81/?r=a