Emocje zaklęte w dźwiękach. Nowy projekt na styku technologii i sztuki

Dodane:

MamStartup logo Mam Startup

Emocje zaklęte w dźwiękach. Nowy projekt na styku technologii i sztuki

Udostępnij:

Studenci informatyki z Uniwersytetu WSB Merito Chorzów połączą siły z Polskim Towarzystwem Harfowym, by stworzyć projekty łączące sztukę i technologię. Wśród planowanych rozwiązań znajdą m.in. aplikacje analizujące emocje w muzyce harfowej za pomocą AI.

Porozumienie podpisali dziekan uczelni, dr Krzysztof Koj, oraz prezeska zarządu Towarzystwa, Ewa Jaślar-Walicka.

Jak zapowiada dr inż. Mariusz Mol, menedżer kierunku informatyka na WSB Merito i absolwent programu Applied Data Science na MIT, studenci będą pracować nad rozwiązaniami, które pozwolą lepiej wyrażać i analizować emocje zawarte w muzyce.

Inspiracją dla projektu są m.in. najnowsze badania prowadzone na Massachusetts Institute of Technology w dziedzinie affective computing. Tamtejsi naukowcy tworzą systemy analizujące emocje na podstawie muzyki, sygnałów fizjologicznych oraz opracowują modele generujące utwory zgodne z zadanym nastrojem emocjonalnym.

W ramach współpracy powstaną m.in. interaktywne aplikacje, systemy wspomagające naukę gry na harfie oraz inteligentne moduły analizujące emocje wykonawcy w czasie rzeczywistym. Studenci skorzystają z zaawansowanych narzędzi technologicznych – takich jak platforma Jetson Orin umożliwiająca przetwarzanie danych na brzegu sieci (edge computing), biblioteki TensorRT i DeepStream oraz framework NVIDIA NeMo, wykorzystywany do przetwarzania sygnałów audio i rozpoznawania emocji.

– Dzięki wykorzystaniu tych narzędzi studenci będą tworzyć technologie na światowym poziomie, łącząc pasję i wiedzę z praktyką – podkreśla dr inż. Mariusz Mol, menedżer kierunku informatyka na WSB Merito.

Efekty współpracy

Pierwszym efektem współpracy będzie nowoczesna platforma internetowa z systemem bazodanowym do obsługi rejestracji uczestników Europejskiego Sympozjum Harfowego. W kolejnych etapach planowane jest rozwijanie narzędzi AI analizujących muzykę – zarówno z nagrań, jak i w czasie rzeczywistym. Jak wskazują badania, odpowiednie modele potrafią z dużą skutecznością klasyfikować emocje na podstawie wzorców akustycznych, językowych oraz dynamicznych cech wykonania.

Projekt ma przyczynić się do głębszego zrozumienia emocjonalnego przekazu w muzyce harfowej oraz stworzenia technologicznego wsparcia dla artystów. Opiekę merytoryczną nad przedsięwzięciem sprawują dr inż. Mariusz Mol oraz Arkadiusz Trefon z Polskiego Towarzystwa Harfowego.

Czytaj także: