Сбер на AI Journey: ИИ-проекты школьников, применение ИИ в медицине, оценке бизнеса и создании контента

Сбер провел дискуссию со школьниками, рассказал об ИИ-системе прогнозирования медицинских диагнозов, ИИ-модели для классификации ESG-рисков, нейросети для генерации видео Kandinsky Video и о создании заставок для СберБанк Онлайн с помощью Kandinsky 3.0 на конференции AI Journey. Об этом сообщает пресс-служба компании.

Школьный трек AI Journey открылся дискуссией с юными талантами

Школьный трек международной конференции «Путешествие в мир искусственного интеллекта» (AI Journey) открылся дискуссией AI for everyone («Искусственный интеллект для каждого»). Первый заместитель председателя правления Сбербанка Александр Ведяхин пообщался с юными талантами – девушками, которые реализуют свои проекты в области искусственного интеллекта (ИИ).

В процессе диалога участницы рассказали о своих историях успеха и о вызовах, с которыми сталкивались, что повлияло на выбор AI и IT как направления для развития. Так, участница из Башкортостана в свои 15 лет уже разрабатывает сайты интернет-магазинов и новостных порталов. Она финалистка конкурса AI Challenge (его проводят Сбер и альянс в сфере ИИ) по направлению «Медицина», в котором её команда решала задачу определения инфаркта миокарда по сигналам ЭКГ.

ИТ-путешествие другой девушки из Казахстана, финалистки AI Challenge в треке «Производство», тоже началось с разработки сайтов. Потом она сделала приложение для трекинга заболевших растений и разработала алгоритм анализа заказов для определения срыва поставок на конкурсе.

Участница из Москвы, двукратная победительница AI Challenge, занимается генерацией музыки и 3D-объектов с помощью моделей ИИ, а также проектирует метавселенную.

Участница из Свердловской области работает над исследовательским проектом по нейросетям и учится использовать их в профессиональной работе журналиста.

Наконец, участница из Иркутской области, которой всего 10 лет, реализовала уже несколько проектов в робототехнике. Она мечтает создать робота для решения экологических проблем, например, для тушения пожаров или сбора мусора.

Девушки рассказали о том, как они справляются с трудностями при проектировании сервисов на основе искусственного интеллекта, и посоветовали тем, кто только начинает свой путь, не бояться сложных задач и всегда стремиться к большему. Александр Ведяхин согласился, что любой проект в сфере искусственного интеллекта начинается с интереса к этой теме и веры в себя.

– Должен быть интерес – большой, яркий, живой интерес к этой сфере. Второе – это вера в себя и понимание того, что ты сможешь найти ответ на любой вопрос, решить любую задачу. Нерешаемых проблем нет. Какой смысл повторять то, что уже сделали другие? Надо делать всегда что-то новое. И мы, как Сбер, все так думаем. Базовые знания – здесь без этого никуда, потому что одного интереса и веры в себя недостаточно. Дальше – это постоянное саморазвитие и отслеживание новостей в мире искусственного интеллекта. Поэтому необходима постоянная насмотренность, понимание, изучение, движение вперёд, – заявил Александр Ведяхин.

Школьный трек AI Journey Junior проходит в онлайн-режиме. Он предназначен для учащихся средних и старших классов, которые интересуются искусственным интеллектом. На нём можно узнать, как ИИ меняет мир к лучшему, дарит крутые возможности и помогает совершать удивительные открытия. От экспертов индустрии ребята получат знания о том, как устроены графы и большие языковые модели, как создать свой сериал и написать сказку с помощью ИИ, связать с искусственным интеллектом своё профессиональное будущее, создать ИИ-стартап или эффективно использовать, созданные Сбером, нейросеть Kandinsky или сервис GigaChat. Все дискуссии AI Journey Junior доступны на сайте конференции.

Ученые Сбера создали систему моделирования и прогнозирования диагнозов

Лаборатория по искусственному интеллекту (ИИ) Сбера разработала медицинское решение, которое моделирует состояние здоровья пациентов по данным их электронных медицинских карт. Об этом рассказал Александр Ведяхин в рамках международной конференции AI Journey.

Специалисты банка адаптировали современную нейросетевую архитектуру Transformers для работы с последовательностями диагнозов пациентов. Данный подход позволил получить формальное представление медицинских профилей пациентов в виде эмбеддингов (embedding – вложение, числовой вектор признаков), полезных для множества научных и практических задач.

Это решение открывает возможности для моделирования треков дальнейшего развития состояний пациентов. Такое свойство модели проверено в задаче предсказания следующего диагноза и подтверждено высокими метриками в эксперименте на публичном датасете медицинских записей MIMIC-III (открытая база данных с информацией о пациентах, поступивших в отделения интенсивной терапии крупного медицинского центра).

– Это уже не первое прорывное MedTech-решение Сбера и наших компаний-партнёров. В России всё шире применяются разработанные Сбером AI-сервисы: компьютерное зрение для расшифровки медицинских изображений (КТ, рентген, маммография), автоматическое заполнение врачебной документации (из голоса – в текст), диагностика заболеваний и другие. Мы также изучаем возможности прогностических моделей, которые работают с медицинскими данными. Как показывает практика, такие решения могут быть востребованы не только в медицине, но и в смежных областях. Это ещё один вклад в сохранение человеческих жизней и развитие здравоохранения, – заявил Александр Ведяхин.

Модель Сбера имеет потенциал применения и в страховом скоринге. С помощью данной модели удастся получить значимый прирост в точности оценки страховых рисков относительно традиционных методов, а это новые возможности для персонализации тарифов и сокращения издержек. Сейчас модель работает с историческим данными, следующим этапом будет обучение её работе в онлайне с данными, получаемыми от клиентов для принятия решения в момент обращения.

Также в ходе исследования предложен H2D-метод (Harbinger Disease Discovery) поиска предвестников заболеваний, позволяющий автоматически генерировать гипотезы о взаимосвязях между болезнями. Так, благодаря нему удалось обнаружить сильную зависимость между группой психологических расстройств и раком молочной железы у женщин. Достоверность этой гипотезы подтверждается в смежных научных исследованиях. В результате учёные сформировали новый набор гипотез о предвестниках пяти наиболее распространённых видов онкозаболеваний. Метод H2D поможет врачебному и научному сообществу в поиске новых направлений медицинских исследований.

Научная работа опубликована в высокорейтинговом международном журнале IEEE Journal of Biomedical and Health Informatics. Текст публикации и исходный код выложены в открытый доступ.

Сбер открыл доступ к ИИ-модели для классификации ESG-рисков

Специалисты лаборатории искусственного интеллекта и дирекции по ESG Сбербанка разработали удобный инструмент для оценки ESG‑рисков компаний – открытую NLP-модель ESGify. Об этом рассказал Александр Ведяхин в рамках международной конференции по искусственному интеллекту AI Journey 2023.

Модель на основе технологии NLP (Natural Language Processing) позволяет обрабатывать и структурировать текстовую информацию, поддерживает русский и английский языки. Для обучения модели был использован датасет (набор данных) из 2,5 тысячи уникальных текстов об ESG-рисках. Для повышения качества была проведена двухэтапная проверка результатов разметки датасета.

Классификатор разработан на основе риск-ориентированного подхода. Модель способна соотнести любой текст из открытых источников с определённым видом реализовавшегося риска либо указать на его отсутствие. Таким образом, сервис помогает решить вопрос анализа ESG‑рисков на основе публичной информации в условиях отсутствия стандартизированных данных по компаниям.

Сервис встраивается в любые продукты или механизмы по оценке ESG-рисков. Классификация ESG-рисков помогает развитию ESG-практик в Data Science и бизнес-сообществах. ИИ-модель Сбера может помочь оценить инвестиционную привлекательность бизнеса с учётом ESG-рисков, а также помочь в проверке поставщиков, контрагентов и клиентов на соответствие ESG-принципам. Сервис также будет полезен консалтинговым компаниям и аналитическим агентствам.

– Сбер одним из первых в России внедрил ESG-принципы во все аспекты своей деятельности и уже несколько лет делится своей экспертизой, инновационными инструментами и сервисами с бизнесом и регионами, чтобы помочь им в ESG-трансформации. Оптимизировать процессы работы с ESG-рисками помогает наша AI-модель, которая автоматически определяет типы рисков. ESGify имеет продвинутую иерархию: модель способна классифицировать тексты по 47 экологическим, социальным и управленческим темам. Она непрерывно обучается и развивается. Планируется, что в будущем сервис сможет не только классифицировать риски, но и определять их значимость, – рассказал Александр Ведяхин.

Сбер представил первую в России нейросеть для генерации полноценного видео Kandinsky Video

Сбер представил нейросеть Kandinsky Video. Это первая в России генеративная модель для создания полноценных видеороликов по текстовому описанию. Модель генерирует видеоряд продолжительностью до восьми секунд с частотой 30 кадров в секунду. Об этом в ходе международной конференции AI Journey рассказал Александр Ведяхин.

Архитектура Kandinsky Video состоит из двух ключевых блоков: первый отвечает за создание ключевых кадров, из которых складывается структура сюжета видео, а второй – за генерацию интерполяционных кадров, которые позволяют достичь плавности движений в финальном видео. В основе двух блоков лежит новая модель синтеза изображений по текстовым описаниям Kandinsky 3.0.

Формат сгенерированного видео представляет собой непрерывную сцену с движением как объекта, так и фона. Именно это отличает видеоролики, синтезированные моделью Kandinsky Video, от анимационных видеороликов, в которых динамика достигается за счёт моделирования пролёта камеры относительно статичной сцены. Нейросеть создаёт видеоролики с разрешением 512х512 пикселей и различным соотношением сторон. Модель обучена на датасете из более чем 300 тысяч пар «текст-видео». Генерация видео занимает до трёх минут.

– Недавно мы обучили Kandinsky создавать анимационные видео по текстовому описанию, а уже сегодня представляем модель совершенно другого уровня – первую в России модель по генерации полноценных видеороликов по тексту. Это важный вклад в развитие российских генеративных нейросетей. У пользователей появится ещё больше возможностей для креатива и реализации своих творческих задумок любой направленности. Люди смогут создавать уникальные видеоролики абсолютно бесплатно. Наша модель, как и большинство других в линейке Сбера, будет доступна в open source. Мы верим, что искусственный интеллект сможет открыть перед людьми новые супервозможности и создать инструменты, которыми они будут пользоваться для решения своих задач, – говорит Александр Ведяхин.

Ранее у активных пользователей Kandinsky 2.2 в тестовом режиме появилась возможность создания анимационных видеороликов. По одному запросу можно создать видео длиной в четыре секунды с выбранным эффектом анимации, с частотой 24 кадра в секунду и разрешением 640х640 пикселей. Пользователи нейросети Kandinsky 3.0 также могут создавать видеоролики по текстовому описанию в режиме анимации.

Оценить возможности нейросети Kandinsky Video можно на платформе fusionbrain.ai и в Telegram-боте, где можно оставить заявку на доступ.

Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке учёных из института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices. В апреле 2023 года сервис на базе нейросети Kandinsky 2.1, стал самым быстрорастущим в мире. Он набрал один миллион уникальных пользователей всего за четыре дня после выхода.

В СберБанк Онлайн можно создавать свои заставки с Kandinsky 3.0

В свежем обновлении СберБанк Онлайн на Android-смартфонах можно реализовать свой творческий потенциал и сгенерировать заставки для входа в приложение с помощью нейросети Сбера Kandinsky. Об этом было объявлено на международной конференции «Путешествие в мир искусственного интеллекта» (AI Journey).

Нарисовать можно до пяти заставок, они будут чередоваться при каждом входе в приложение. Причём каждая из них будет уникальной, ведь генерации нейросети никогда не повторяются.

Создание изображения занимает от нескольких секунд до пары минут. Пользователю нужно придумать текстовое описание (промпт) того, что он хочет увидеть на картинке, а далее нейросеть всё сделает сама. Чем подробнее будет запрос, тем точнее и качественнее получится итоговое изображение. Для Kandinsky нет ничего невозможного: модель способна создавать изображение на бесконечное количество тем. Коты-космонавты, сказочные герои или новогодние пейзажи, мир волшебства и магии, советская живопись или киберпанк – весь полёт фантазии теперь может оказаться на заставке СберБанк Онлайн.

– Нейросеть Kandinsky – это удивительный новый клиентский опыт, возможность привнести в СберБанк Онлайн свои эмоции и индивидуальность. Интеграция искусственного интеллекта бесконечно расширила спектр доступных заставок, теперь его определяет исключительно фантазия наших клиентов. Напомню, что, помимо шедевров от Kandinsky, в качестве заставки можно установить любимое фото, пейзаж от Русского географического общества или картину из Третьяковской галереи, изображения обитателей подводного мира, фото объектов под микроскопом и многое другое, – говорит вице-президент, директор департамента цифровых каналов B2C Сбербанка Алексей Круглов.

Сервис генерации заставок доступен на главном экране по «•••» – «Заставки от Kandinsky» (или по слову «Заставки» в поисковой строке). Чтобы воспользоваться им, нужно обновить мобильное приложение на устройствах Android до версии 14.18 и выше.