Написать пост

Российские учёные начали разработку виртуального ассистента для композиторов

Аватар Даниил Шатухин

Ассистент уже способен определять настроение пользователя и продолжать замысел композитора в музыкальном произведении. Учёные планируют использовать разработку и в других сферах цифрового искусства.

Исследовательская группа Института интеллектуальных кибернетических систем Национального исследовательского ядерного университета «МИФИ» (НИЯУ МИФИ) начала разработку программы, которая поможет композиторам в написании музыкальных произведений. Созданный ассистент уже способен определить настроение человека и следовать его задумке.

Принцип работы программы

Виртуальный ассистент композитора — программа, обученная теории музыки и способная предугадать настроение пользователя, чтобы продолжить задумку автора. Также система может добавлять ноты в композицию, выстраивать аккорды и чередовать их в соответствии с гармоническим рядом.

Для достижения такого результата учёным пришлось проанализировать музыкальную теорию и составить семантические карты, опираясь на этот анализ. После чего исследователи сопоставили тональности и последовательности аккордов с настроением человека и его эмоциями.

Большинство подобных приложений представляют собой нейронные сети, обученные писать музыку или рисовать картины. Но у нас идея в другом: уловить эмоциональный настрой человека и следовать логике этого настроя.

Ассистент работает, опираясь на семантическую карту, где эмоциональное состояние человека — точка в аффективном пространстве. Каждое возможное развитие событий тоже имеет координаты. При работе с картой система согласовывает свои действия с законами, действующими внутри семантической сети. Правила строятся на основе настроения человека и музыкальной теории.

Для создания проекта провели тестирование. Участникам опроса предлагали дать оценку различным последовательностям аккордов по десятибалльной шкале. В качестве критериев исследователи использовали эмоциональные состояния: «приятно-неприятно», «весело-грустно», «возбуждающе-скучно». Такая оценка позволила исследователям составить трёхмерные семантические карты.

По словам разработчиков, систему можно будет использовать и в других видах искусства. В планы учёных входит внедрение подобных ассистентов во многие системы, построенные на взаимодействии человека и машины.

Исследователи из разных стран продолжают эксперименты с внедрением современных технологий в область искусства. В апреле 2018 года искусственный интеллект обучили распознавать музыку, которую человек воспроизводит у себя в голове.

Следите за новыми постами
Следите за новыми постами по любимым темам
568 открытий568 показов