Forwarded from Объявления конференции HighLoad++
Всем привет! Сегодня знакомим вас с первыми спикерами секции «Нейронные сети, искусственный интеллект»
⠀
1) Андрей Кузнецов (AIRI) «Как научить фундаментальные модели читать, видеть, слышать и анализировать всё одновременно»
⠀
Моделью, которая умеет общаться текстом, сейчас уже никого не удивишь. Андрей расскажет, из чего собрать модель, которая в дополнение к этому умеет смотреть картинки и слушать речь. Очередной шаг на пути к General AI!
⠀
2) Алексей Воропаев (SberAutoTech) «Архитектура беспилотного транспорта нового поколения»
⠀
Доклад позволит узнать, как NeRF нейросети позволяют организовать End2End обучение и тестирование современного беспилотного транспорта.
⠀
3) Евгений Кокуйкин (Raft) «Новые атаки на LLM и методы защиты для прикладных приложений»
⠀
Чем больше LLM проникает в нашу жизнь, тем острее встают вопросы безопасности. Вариативность атак меняется не просто быстро, а очень быстро. Из доклада вы получите полное представление о текущем состоянии атак на LLM и научитесь идентифицировать потенциальные уязвимости в своих приложениях.
⠀
Присоединяйтесь к нам 24 и 25 июня на Saint HighLoad++ 2024 🙌
⠀
✅ Ознакомиться со всеми принятыми докладами и купить билет можно на сайте
⠀
1) Андрей Кузнецов (AIRI) «Как научить фундаментальные модели читать, видеть, слышать и анализировать всё одновременно»
⠀
Моделью, которая умеет общаться текстом, сейчас уже никого не удивишь. Андрей расскажет, из чего собрать модель, которая в дополнение к этому умеет смотреть картинки и слушать речь. Очередной шаг на пути к General AI!
⠀
2) Алексей Воропаев (SberAutoTech) «Архитектура беспилотного транспорта нового поколения»
⠀
Доклад позволит узнать, как NeRF нейросети позволяют организовать End2End обучение и тестирование современного беспилотного транспорта.
⠀
3) Евгений Кокуйкин (Raft) «Новые атаки на LLM и методы защиты для прикладных приложений»
⠀
Чем больше LLM проникает в нашу жизнь, тем острее встают вопросы безопасности. Вариативность атак меняется не просто быстро, а очень быстро. Из доклада вы получите полное представление о текущем состоянии атак на LLM и научитесь идентифицировать потенциальные уязвимости в своих приложениях.
⠀
Присоединяйтесь к нам 24 и 25 июня на Saint HighLoad++ 2024 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
Мы выложили в открытый доступ OmniFusion 1.1. — первую в России мультимодальную модель искусственного интеллекта 🚀
🔥 О модели
OmniFusion 1.1. — это передовая мультимодальная модель искусственного интеллекта, предназначенная для расширения возможностей традиционных систем обработки языка за счет интеграции дополнительных модальностей данных, например, изображений, а в перспективе — аудио, 3D- и видеоконтента. Модель – SoTA на ряде бенчмарков (среди моделей схожего размера) и, более того, модель хорошо справляется со сложными задачами и понимает русский язык.
🔖 Открытый код
В этот раз мы выкладываем модель в открытый доступ! Делимся ссылкой на GitHub и Technical Report на arXiv. Модель можно использовать как в некоммерческой, так и в коммерческой деятельности.
🌐 Статья на Хабр
В статье мы рассказали об особенностях модели, процессе обучения и примерах ее использования. Также подсветили архитектуру, проделанные эксперименты как в части архитектурных трюков, так и в работе с данными. А еще собрали интересные кейсы использования на английском и русском языках.
На Hugging Face статья про архитектуру OmniFusion уже на первом месте в списке daily papers 🔥
OmniFusion 1.1. — это передовая мультимодальная модель искусственного интеллекта, предназначенная для расширения возможностей традиционных систем обработки языка за счет интеграции дополнительных модальностей данных, например, изображений, а в перспективе — аудио, 3D- и видеоконтента. Модель – SoTA на ряде бенчмарков (среди моделей схожего размера) и, более того, модель хорошо справляется со сложными задачами и понимает русский язык.
В этот раз мы выкладываем модель в открытый доступ! Делимся ссылкой на GitHub и Technical Report на arXiv. Модель можно использовать как в некоммерческой, так и в коммерческой деятельности.
В статье мы рассказали об особенностях модели, процессе обучения и примерах ее использования. Также подсветили архитектуру, проделанные эксперименты как в части архитектурных трюков, так и в работе с данными. А еще собрали интересные кейсы использования на английском и русском языках.
На Hugging Face статья про архитектуру OmniFusion уже на первом месте в списке daily papers 🔥
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
AIRI Institute
Открываем регистрацию на следующий AIRI Seminars и делимся подробностями ⤵️ ⚫️ Тема: Локальные методы распределенной оптимизации ⚫️ Дата и время: 10 апреля в 17:00 ⚫️ Докладчик: Александр Безносиков, МФТИ ⚫️ Оппонент: Александр Катруца, Сколтех, AIRI ⚫️ Описание…
Трансляция AIRI Seminars по ссылке, подключайтесь! 🍿
На международной конференции по анализу данных и технологиям искусственного интеллекта Data Fusion расскажем про то, какие исследования проводим в Институте, а также примем участие в нескольких сессиях ⤵
📍 17 апреля
13:00 — CEO Института AIRI, профессор Сколтеха Иван Оселедец примет участие в сессии про обзор ключевых исследований в области искусственного интеллекта в России
14:10 — в онлайн-формате пройдет доклад Евгения Бурнаева о топологическом анализе данных и доклад Александра Коротина про новые перспективные методы генеративного ИИ на основе потоков и диффузионных мостов
14:30 — сессия «ML + наука: медицина. Как искусственный интеллект обогащается знаниями из области медицины и биологии» с директором лаборатории «Сильный ИИ в медицине» Дмитрием Дыловым
15:50 — руководитель группы FusionBrain Андрей Кузнецов и научный консультант AIRI, управляющий директор по исследованию данных Sber AI Денис Димитров на кейс-сессии «Генеративные модели и мультимодальность: настоящее и будущее»
15:55 — «ML + наука: физика», модератором сессии выступит CEO Института AIRI, профессор Сколтеха Иван Оселедец
17:00 – руководители групп Евгений Бурнаев и Антон Конушин на кейс-сессии «Компьютерное зрение: настоящее и будущее»
17:30 — руководитель группы «Биоинформатика» Ольга Кардымон выступит на сессии «ML + наука: фарма»
18:15 — Q&A сессия с CEO Института AIRI, профессором Сколтеха Иваном Оселедцем «Прогресс или регресс: куда ведет нас искусственный интеллект — эксперты о трендах»
📍 18 апреля
14:15 — дискуссия «Как учить и как применять свои собственные генеративные модели» с руководителем группы «Обучаемый интеллект» AIRI и директором Центра ИИ Сколтеха Евгением Бурнаевым
16:30 — сессия «Генеративный ИИ: нестандартные кейсы применения в российском бизнесе», спикером в ней также выступит Евгений Бурнаев
До встречи на конференции, регистрация и программа по ссылке!😁
13:00 — CEO Института AIRI, профессор Сколтеха Иван Оселедец примет участие в сессии про обзор ключевых исследований в области искусственного интеллекта в России
14:10 — в онлайн-формате пройдет доклад Евгения Бурнаева о топологическом анализе данных и доклад Александра Коротина про новые перспективные методы генеративного ИИ на основе потоков и диффузионных мостов
14:30 — сессия «ML + наука: медицина. Как искусственный интеллект обогащается знаниями из области медицины и биологии» с директором лаборатории «Сильный ИИ в медицине» Дмитрием Дыловым
15:50 — руководитель группы FusionBrain Андрей Кузнецов и научный консультант AIRI, управляющий директор по исследованию данных Sber AI Денис Димитров на кейс-сессии «Генеративные модели и мультимодальность: настоящее и будущее»
15:55 — «ML + наука: физика», модератором сессии выступит CEO Института AIRI, профессор Сколтеха Иван Оселедец
17:00 – руководители групп Евгений Бурнаев и Антон Конушин на кейс-сессии «Компьютерное зрение: настоящее и будущее»
17:30 — руководитель группы «Биоинформатика» Ольга Кардымон выступит на сессии «ML + наука: фарма»
18:15 — Q&A сессия с CEO Института AIRI, профессором Сколтеха Иваном Оселедцем «Прогресс или регресс: куда ведет нас искусственный интеллект — эксперты о трендах»
14:15 — дискуссия «Как учить и как применять свои собственные генеративные модели» с руководителем группы «Обучаемый интеллект» AIRI и директором Центра ИИ Сколтеха Евгением Бурнаевым
16:30 — сессия «Генеративный ИИ: нестандартные кейсы применения в российском бизнесе», спикером в ней также выступит Евгений Бурнаев
До встречи на конференции, регистрация и программа по ссылке!
Please open Telegram to view this post
VIEW IN TELEGRAM
#AIRISeminars
Приглашаем на следующий научный семинар 17 апреля в 17:00⤵
Научный сотрудник AIRI Алексей Скрынник рассмотрит классическую задачу многоагентного поиска пути, а также нестандартные подходы к её решению, основанные на обучении с подкреплением, в децентрализованной постановке. Оппонентом выступит кандидат технических наук, профессор университета ИТМО, доцент НИУ ВШЭ Алексей Шпильман. В конце доклада, как всегда, вопросы, нетворкинг и пицца.
📌 Если хотите посетить семинар в очном формате, необходимо пройти регистрацию на сайте. Онлайн-формат — в трансляции на YouTube-канале.
До встречи!
Приглашаем на следующий научный семинар 17 апреля в 17:00
Научный сотрудник AIRI Алексей Скрынник рассмотрит классическую задачу многоагентного поиска пути, а также нестандартные подходы к её решению, основанные на обучении с подкреплением, в децентрализованной постановке. Оппонентом выступит кандидат технических наук, профессор университета ИТМО, доцент НИУ ВШЭ Алексей Шпильман. В конце доклада, как всегда, вопросы, нетворкинг и пицца.
До встречи!
Please open Telegram to view this post
VIEW IN TELEGRAM
Рассказываем про последние публикации в нашем блоге ⤵️
⚫️ Статья про то, как информация о ближайших соседях помогла точнее дополнять графы знаний
Графы знаний применяют в самых разных областях: интеллектуальный анализ данных, поиск информации, вопросно-ответные системы и системы рекомендаций. Но иногда в них встречаются пропуски, для борьбы с которыми существуют методы дополнения графов знаний.
Исследователи из МФТИ, AIRI и Лондонского института Математических Наук предложили метод, который учитывает при этом ближайшие окрестности вершин графа. Статья с результатами научного исследования опубликована в сборнике конференции EMNLP 2023. Кстати, эта научная работа началась как проект Аллы Чепуровой, когда она была студентом на нашей летней школе в 2022 году.
⚫️ Рассказ про два новых подхода, которые улучшили многоагентное планирование пути в децентрализованных условиях
При разработке видеоигр, планировании работы курьеров и автоматизации складов нужны алгоритмы, которые позволяют всем участникам движения достигать целей, не мешая друг другу. Такая задача получила название многоагентного планирования пути. На недавно прошедшей конференции AAAI-24 команда исследователей из группы «Нейросимвольная интеграция» AIRI представила сразу два новых подхода (первый и второй), которые решают децентрализованный вариант этой задачи в условиях частичной наблюдаемости.
⚫️ Блог про блочный поиск и то, как он существенно ускорил анонимное многоагентное планирование пути
Завершаем подборку рассказом про еще один доклад с конференции AAAI-24 от группы «Нейросимвольная интеграция», который посвящен проблеме многоагентного планирования пути в централизованной постановке. На этот раз исследователи показали, что блочный поиск маршрутов способен сильно ускорить достижение агентами целей.
Еще больше статей — в нашем блоге по ссылке📎
Графы знаний применяют в самых разных областях: интеллектуальный анализ данных, поиск информации, вопросно-ответные системы и системы рекомендаций. Но иногда в них встречаются пропуски, для борьбы с которыми существуют методы дополнения графов знаний.
Исследователи из МФТИ, AIRI и Лондонского института Математических Наук предложили метод, который учитывает при этом ближайшие окрестности вершин графа. Статья с результатами научного исследования опубликована в сборнике конференции EMNLP 2023. Кстати, эта научная работа началась как проект Аллы Чепуровой, когда она была студентом на нашей летней школе в 2022 году.
При разработке видеоигр, планировании работы курьеров и автоматизации складов нужны алгоритмы, которые позволяют всем участникам движения достигать целей, не мешая друг другу. Такая задача получила название многоагентного планирования пути. На недавно прошедшей конференции AAAI-24 команда исследователей из группы «Нейросимвольная интеграция» AIRI представила сразу два новых подхода (первый и второй), которые решают децентрализованный вариант этой задачи в условиях частичной наблюдаемости.
Завершаем подборку рассказом про еще один доклад с конференции AAAI-24 от группы «Нейросимвольная интеграция», который посвящен проблеме многоагентного планирования пути в централизованной постановке. На этот раз исследователи показали, что блочный поиск маршрутов способен сильно ускорить достижение агентами целей.
Еще больше статей — в нашем блоге по ссылке
Please open Telegram to view this post
VIEW IN TELEGRAM
AIRI Institute
#AIRISeminars Приглашаем на следующий научный семинар 17 апреля в 17:00 ⤵ Научный сотрудник AIRI Алексей Скрынник рассмотрит классическую задачу многоагентного поиска пути, а также нестандартные подходы к её решению, основанные на обучении с подкреплением…
Трансляция семинара по ссылке, подключайтесь! 🍿
Подробности, ссылки и выводы в посте ниже
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from База знаний AI
Датасет Skoltech3D назван одним из лучших для трехмерной реконструкции изображений — Stanford HAI
Специалисты Стэнфордского центра Institute for Human-Centered AI (Stanford HAI) в своем отчете AI Index Report 2024 подвели итоги развития трендов искусственного интеллекта в 2023 году. Рассматривая возможности ИИ в области компьютерного зрения и создания изображений, аналитики упомянули датасет Skoltech3D, предназначенный для многоракурсной 3D-реконструкции. Его в мае 2023 года представили ученые «Сколтеха», Института AIRI, МИФИ, Технического университета Мюнхена (Германия) и Нью-Йоркского университета (США).
Также среди некоторых выводов отчета:
● LLM открыли новые возможности в робототехнике. Мировым лидером по внедрению сервисных роботов является Китай, а Россия входит в топ-10 стран по производству таких устройств;
● более четверти всех частных инвестиций в ИИ в 2023 году пришлось на генеративный ИИ. Основными игроками в этом сегменте являются OpenAI, Anthropic, Hugging Face и Inflection;
● число ИИ-разработок на базе Open Source активно увеличивается. В 2023 году их количество на GitHub выросло более чем на 59%;
● закрытые LLM (Closed Source LLM) работают в среднем на 24,2% эффективнее открытых моделей;
● передовые ИИ-модели (Frontier AI) становятся все более дорогими. Так, в OpenAI потратили $78 млн на обучение GPT-4, а компания Google на Gemini Ultra — $191 млн.
👉🏻 Другие выводы отчета (502 стр.)
Специалисты Стэнфордского центра Institute for Human-Centered AI (Stanford HAI) в своем отчете AI Index Report 2024 подвели итоги развития трендов искусственного интеллекта в 2023 году. Рассматривая возможности ИИ в области компьютерного зрения и создания изображений, аналитики упомянули датасет Skoltech3D, предназначенный для многоракурсной 3D-реконструкции. Его в мае 2023 года представили ученые «Сколтеха», Института AIRI, МИФИ, Технического университета Мюнхена (Германия) и Нью-Йоркского университета (США).
Также среди некоторых выводов отчета:
● LLM открыли новые возможности в робототехнике. Мировым лидером по внедрению сервисных роботов является Китай, а Россия входит в топ-10 стран по производству таких устройств;
● более четверти всех частных инвестиций в ИИ в 2023 году пришлось на генеративный ИИ. Основными игроками в этом сегменте являются OpenAI, Anthropic, Hugging Face и Inflection;
● число ИИ-разработок на базе Open Source активно увеличивается. В 2023 году их количество на GitHub выросло более чем на 59%;
● закрытые LLM (Closed Source LLM) работают в среднем на 24,2% эффективнее открытых моделей;
● передовые ИИ-модели (Frontier AI) становятся все более дорогими. Так, в OpenAI потратили $78 млн на обучение GPT-4, а компания Google на Gemini Ultra — $191 млн.
👉🏻 Другие выводы отчета (502 стр.)
Следующий выпуск #AIRISeminars пройдет в среду 24 апреля в 16:00 ⤵
⚫ Докладчик: Евгений Винитский, New York University
⚫ Оппонент: Константин Яковлев, AIRI
⚫ Тема: Real-world reinforcement learning in multi-agent systems
📌 В этот раз доклад будет полностью на английском языке, подробное описание и регистрация на офлайн-формат уже на сайте. Онлайн-формат — в трансляции на YouTube.
До встречи!
До встречи!
Please open Telegram to view this post
VIEW IN TELEGRAM
Научный консультант Института AIRI и управляющий директор по исследованию данных в «Сбере» Денис Димитров — в лонг-листе шестого рейтинга Forbes «30 до 30» 🚀
Денис — один из главных создателей нейросетей Kandinsky, Kandinsky Video и чат-бота с генеративным искусственным интеллектом GigaChat. Под его руководством команда также создала модель «Digital Петр», которая распознает рукописи Петра I.
📌 Из списка номинантов жюри, экспертный совет и редакция выберут топ-30. Проголосовать за Дениса можно на сайте Forbes в рубрике «Наука и технологии» до 30 апреля включительно.
Желаем Денису победы и поздравляем с номинацией!
Денис — один из главных создателей нейросетей Kandinsky, Kandinsky Video и чат-бота с генеративным искусственным интеллектом GigaChat. Под его руководством команда также создала модель «Digital Петр», которая распознает рукописи Петра I.
Желаем Денису победы и поздравляем с номинацией!
Please open Telegram to view this post
VIEW IN TELEGRAM
Трансляция по ссылке, подключайтесь! 🍿
YouTube
AIRI Seminars | Real-world reinforcement learning in multi-agent systems
В эти выходные исследователи AIRI примут участие в ROS Meetup ⤵
27 апреля
◼️ Кандидат физико-математических наук, руководитель группы «Нейросимвольная интеграция» AIRI Александр Панов примет участие в панельной дискуссии «Reinforcement learning в робототехнике».
◼️ Стажер-исследователь AIRI Егор Черепанов и кандидат компьютерных наук, научный сотрудник AIRI Алексей Ковалёв представят доклад «Трансформеры с памятью в обучение с подкреплением для робототехнических задач».
◼️ Кандидат физико-математических наук, научный сотрудник AIRI Алексей Староверов выступит с докладом «Онлайн и оффлайн обучение с подкреплением для генерации и оценки робототехнических действий на основе GPT моделей».
28 апреля
◼️ Кандидат технических наук, cтарший научный сотрудник AIRI Дмитрий Юдин представит доклад «OpenPlaceRecognition: открытая библиотека мультимодального распознавания места для роботов и беспилотных автомобилей».
Все подробности и регистрация по ссылке📌
27 апреля
28 апреля
Все подробности и регистрация по ссылке
Please open Telegram to view this post
VIEW IN TELEGRAM
Сегодня в рубрике #AIRI_в_лицах Егор Ершов — кандидат физико-математических наук, руководитель группы «Цветовая вычислительная фотография» AIRI и руководитель сектора репродукции и синтеза цвета ИППИ РАН ⤵
🔵 Почему наука?
«Выпустившись из сильного математического класса, я выбрал путь инженера, поступил в Бауманку и проучился там 2 года, понял, что хочу больше математики и модельного мышления, и перешел в МФТИ.
На Физтехе в конечном итоге я попал под научное руководство Гасникова А.В. и Нестерова Ю.Е. Позднее, в ИППИ РАН, я нашел себя как специалист по компьютерному зрению, цвету и колориметрии, а сейчас развиваю методы цветовой вычислительной фотографии в Институте AIRI».
🔵 В свободное время
«Занимаюсь бегом, за первую половину апреля я пробежал уже 100 км. Также сейчас занимаюсь мотокроссом и участвую в соревнованиях. В моей жизни всегда было очень много спорта, например, разряды по плаванию и картингу».
🔵 Вдохновение
«Меня вдохновляет любопытство и желание навести порядок там, где его нет, особенно когда я понимаю, что я действительно могу помочь с этим. А еще возможность узнать что-то впервые».
🔵 На работе
«Работа группы заключается в создании метрик оценки качества изображений, проведении международных соревнований по вычислительной фотографии и разработке методов анализа медицинских изображений. Мы по сути скрещиваем изучение цвета с нейросетями. Исследуем, как человек воспринимает цвета, прогнозируем эстетические предпочтения — по этой теме готовится совместная работа с коллегами из Италии и Хорватии. В медицине фокусируемся на анализе экспресс-тестов, сильно углубились в оценку неопределенности при определении групп крови».
🔵 Интересные факты
«За последние пять лет я трижды спал на льду Байкала зимой, ночевал в Хибинских тундрах в -40° и кильнулся в Северно-Ледовитом океане на байдарке».
🔵 Наука — это
«Для меня наука — это открытие и создание нового».
Все интервью с исследователями собраны в канале по тегу #AIRIвлицах💡
«Выпустившись из сильного математического класса, я выбрал путь инженера, поступил в Бауманку и проучился там 2 года, понял, что хочу больше математики и модельного мышления, и перешел в МФТИ.
На Физтехе в конечном итоге я попал под научное руководство Гасникова А.В. и Нестерова Ю.Е. Позднее, в ИППИ РАН, я нашел себя как специалист по компьютерному зрению, цвету и колориметрии, а сейчас развиваю методы цветовой вычислительной фотографии в Институте AIRI».
«Занимаюсь бегом, за первую половину апреля я пробежал уже 100 км. Также сейчас занимаюсь мотокроссом и участвую в соревнованиях. В моей жизни всегда было очень много спорта, например, разряды по плаванию и картингу».
«Меня вдохновляет любопытство и желание навести порядок там, где его нет, особенно когда я понимаю, что я действительно могу помочь с этим. А еще возможность узнать что-то впервые».
«Работа группы заключается в создании метрик оценки качества изображений, проведении международных соревнований по вычислительной фотографии и разработке методов анализа медицинских изображений. Мы по сути скрещиваем изучение цвета с нейросетями. Исследуем, как человек воспринимает цвета, прогнозируем эстетические предпочтения — по этой теме готовится совместная работа с коллегами из Италии и Хорватии. В медицине фокусируемся на анализе экспресс-тестов, сильно углубились в оценку неопределенности при определении групп крови».
«За последние пять лет я трижды спал на льду Байкала зимой, ночевал в Хибинских тундрах в -40° и кильнулся в Северно-Ледовитом океане на байдарке».
«Для меня наука — это открытие и создание нового».
Все интервью с исследователями собраны в канале по тегу #AIRIвлицах
Please open Telegram to view this post
VIEW IN TELEGRAM
Запускаем Большой Семинар AIRI — пространство для знакомства исследователей из разных областей и всех, кто интересуется наукой 💡
21 мая в 17:30 российский химик, академик РАН, заведующий лабораторией Института органической химии им. Н. Д. Зелинского РАН Валентин Анаников выступит с докладом «Искусственный интеллект в химии».
Руководитель Большого Семинара AIRI — доктор физико-математических наук, профессор РАН, CEO Института AIRI, профессор Сколтеха Иван Оселедец.
Приглашаем вас разделить с нами запуск проекта, послушать лекцию и поучаствовать в дискуссии.
📌 Регистрируйтесь по ссылке и делитесь постом с друзьями и коллегами!
21 мая в 17:30 российский химик, академик РАН, заведующий лабораторией Института органической химии им. Н. Д. Зелинского РАН Валентин Анаников выступит с докладом «Искусственный интеллект в химии».
Руководитель Большого Семинара AIRI — доктор физико-математических наук, профессор РАН, CEO Института AIRI, профессор Сколтеха Иван Оселедец.
Приглашаем вас разделить с нами запуск проекта, послушать лекцию и поучаствовать в дискуссии.
Please open Telegram to view this post
VIEW IN TELEGRAM