Ocena emocji w korpusie mowy emocjonalnej

Transkrypt

Ocena emocji w korpusie mowy emocjonalnej
Ocena emocji w korpusie mowy emocjonalnej
Wstęp
 Emocja odgrywa dużą rolę w komunikacji; Jako ludzie jesteśmy wrażliwi na
informacje dotyczące stanu mówcy i świadczące o jego ukrytych intencjach

Powiązanie emocji ze zmianą parametrów akustycznych w glosie
(wąski zakres f0- smutek, szeroki –silne pobudzenie emocją, szybka mowa jest oznaką
radości, a wolna smutku)
 Różna rozpoznawalnośd emocji, tłumaczenie z perspektywy biologicznej
Rozpoznanie emocji z mowy i z wyrazu twarzy
Przykład: radośd i obrzydzenie mają bardzo dobre rozpoznanie z wyrazu twarzy,
natomiast słabe z głosu
Smutek, złośd i strach mają najlepsze rozpoznanie.
Korpusy mowy




Najczęściej korzysta się z odegranych emocji. Spontaniczne emocje są trudne do
zarejestrowania, a celowe wywoływanie emocji jest etycznym dylematem.
Znaczenie mają indywidualne zdolności aktorów-> selekcja materiału
Zawartośd semantyczna korpusu powinna byd neutralna, aby nie wpływała na
postrzeganie emocji.
Najczęściej rejestrowane są emocje podstawowe: złośd, smutek, radośd, strach,
obrzydzenie, zaskoczenie, stan neutralny
Korpus mgr Magdaleny Igras
5 podstawowych emocji radośd, smutek, złośd, strach, zdziwienie, ironię oraz stan
neutralny/obojętny jako sygnał referencyjny
W nagraniach wzięło udział 12 mówców (6 kobiet, 6 mężczyzn) w wieku 20-30 lat. Częśd z
nich to profesjonalni aktorzy lub amatorzy, a częśd - studenci wolontariusze.
46 zdao, 12 jednowyrazowych poleceo, 10 cyfr, krótki tekst
Zastosowanie: systemu automatycznego rozpoznawania mowy, algorytmy syntezy mowy
emocjonalnej, badania ludzkiej percepcji emocji
Jak przeprowadza się testy?
Testy wyboru: możliwośd odsłuchania raz lub wielokrotnie, kilka próbek do jednej emocji ( w
EMOVO Corpus an italian emotional speech database), 2 opcje lub wszystkie emocje, osobne
testy dla każdego aktora, mieszanie nagrao aby słuchacz nie przywykał do głosu jednej osoby
Występowanie nagrania o neutralnym zabarwieniu emocjonalnym jako referencji
Model emocji VAD (typ emocji pozytywna-negatywna, intensywnośd, kontrola nad emocją)
albo Plutchik (8 podstawowych emocji)
Co jeszcze można zbadad?
Trafnośd ocen mężczyzn, a kobiet
Wpływ długości próbki mowy na rozpoznanie
Skutecznośd profesjonalnych aktorów, a amatorów
Wpływ stanu emocjonalnego słuchacza na rozpoznanie danych emocji- teza ,ze bardziej
zwraca się uwagę na stan emocjonalny w którym się znajdujemy
Porównanie z oceną emocji skryptem