Лаборатория речевых и многомодальных интерфейсов

Мы получили гранты РНФ, а также стипендии аспирантам и адъюнктам

Мы получили гранты Российского Научного Фонда (РНФ):

  • РНФ № 24-71-00083 «Исследование и разработка интеллектуальной системы распознавания жестов для управления интерфейсами человеко-машинного взаимодействия»

    Руководитель: Рюмин Дмитрий Александрович
    Сроки проекта: 2024-2026
    Данный научный проект направлен на разработку интеллектуальной системы для распознавания жестикуляций человека, основанной на современных методах глубокого машинного обучения. Жестикуляция, важный элемент невербальной коммуникации, которая играет важную роль в общении и требует эффективного распознавания для улучшения качества человеко-машинного взаимодействия.

     

  • РНФ № 24-71-00112 «Исследование и разработка системы для синтеза реалистичных движений губ цифровых аватаров в соответствии с произносимой речью»

    Руководитель: Аксёнов Александр Александрович
    Сроки проекта: 2024-2026
    Данный научный проект направлен на разработку интеллектуальной системы для синтеза фотореалистичных движений губ цифровых аватаров, синхронизированных с входной речью, с использованием современных методов машинного обучения. Реалистичная визуализация артикуляции играет ключевую роль в создании выразительных анимированных персонажей для улучшения качества человеко-компьютерного взаимодействия во многих сферах, включая удаленные коммуникации, образование, развлечения и другие.

     

Кроме того, Рюмина Елена Витальевна стала получателем стипендии для аспирантов и адьюнктов с темой исследования «Модели и методы интеллектуального анализа персональных качеств личности человека на основе его мультимодальных данных. »
Данный научный проект направлен на разработку моделей и методов интеллектуального анализа пятифакторной модели личности человека с использованием мультимодальных данных (аудио, видео и текст). Пятифакторная модель, также известная как OCEAN, описывает пять персональных качеств личности человека: Открытость опыту (Openness), Добросовестность (Conscientiousness), Экстраверсия (Extraversion), Доброжелательность (Agreeableness) и Эмоциональная стабильность (Non-Neuroticism). Результаты проекта найдут применение в различных областях, таких как управление человеческими ресурсами, маркетинг, образование и медицина, что будет способствовать улучшению качества жизни человека и его профессиональной деятельности.