Middle Researcher в группу FusionBrain
Обязанности
Мы приглашаем исследователей в области машинного обучения и робототехники присоединиться к команде мультимодальных исследований FusionBrain в AIRI, передовом исследовательском институте, специализирующемся на долгосрочных наукоемких проектах в области искусственного интеллекта.
Требования
В нашей команде мы фокусируемся на разработке новых мультимодальных архитектур, умеющих решать большой спектр задач. В настоящее время отдельные команды в группе проводят исследования в следующих направлениях:
· Разработка моделей, умеющих работать одновременно с текстом, изображениями, аудио и другими модальностями и исследование способов добавления новых модальностей с целью создания мультимодального LLM-based ассистента
· Разработка энкодеров для новых модальностей
· Анализ внутренних характеристики больших языковых моделей для задачи интерпретируемости LLM
· Исследование способов взаимодействия языковых моделей между собой, так называемые мультиагентные LLM — здесь ключевая задача научиться «выжимать» из моделей максимум знаний без дополнительного обучения и повышать качество решения конечных задач за счёт организации коммуникации моделей между собой
· Разработка диффузионных генеративных моделей для синтеза изображений, аудио, видео данных
Отдельное направление FusionBrain.Robotics создано для разработки мультимодальных архитектур в интересах задач робототехники, то есть решается задача одновременного анализа как визуальной информации из различных источников, так и данных сенсоров, установленных на роботах.
