Investigación | Proyectos Financiados

PROCEDURE DI ANALISI E MODELLIZZAZIONE DEI PROFILI PROSODICI PER LA RIPRODUZIONE, LA VALUTAZIONE E LA SINTESI VOCALE

Il progetto consta di una ricerca applicata, che si incentra sullo studio e sulla sperimentazione di metodi di analisi e modellizzazione dei profili prosodici (tonali e metrici) di enunciati prodotti in parlato naturale, al fine di individuare un certo numero di indici e parametri necessari e sufficienti a mettere in atto procedure automatiche di stilizzazione e di sintesi vocale, anche a partire da un testo scritto.La ricerca si articolerà in diverse attività, ciascuna con propri metodi e scopi specifici, ma tutte convergenti nelle fasi applicative. Di seguito si descrivono brevemente i principali ambiti di studio e sperimentazione.•Linea 1) Analisi, modellizzazione e stilizzazione dei profili tonali in L1 ed L2. Questa prima linea di ricerca sviluppa e implementa una questione metodologica già affrontata in un precedente progetto di monitoraggio delle competenze prosodiche di apprendenti di L2 (FARB 2015 e 2016).Nell'ambito del progetto si è resa necessaria la creazione di "modelli prosodici" rappresentativi di enunciati in diverse L1 e il confronto di tali modelli tra loro e con le produzioni degli apprendenti.Ci si prefigge, in questa fase, di affinare la sperimentazione dei metodi di modellizzazione e di definire metodi di stilizzazione dei profili, basati su parametri certi, significativi e di numero limitato che possano entrare a far parte di un procedimento ‘protocollare’ di confronto e di misura.Si lavorerà sull’analisi dei seguenti indicatori fonetici:a) Attacco della curva della TU (‘livello’ di f0 e forma del profilo);b) Descrizione minima simbolica e parametrica del ‘profilo globale’ dell’intera unità intonativa e del ‘contorno terminale’;c) Individuazione della sequenza e del tipo di accenti;d) Individuazione di indicatori di ‘range’ (‘span’ e ‘livello’ di f0) che misurino il ‘registro’ adottato.Sarà condotta, infine, una sperimentazione di estrazione automatica dei profili modellizzati.•Linea 2) Misura e valutazione delle distanze fonetiche dei profili tonaliLa seconda linea di ricerca segue metodologicamente la prima, definendo in maniera precisa le procedure da attuare nel confronto tra profili prosodici reali e modellizzati.Si lavorerà sperimentalmente su un corpus di produzioni di apprendenti in L2, scegliendo tipologie di enunciati-campione. Lo scopo sarà misurare, per ciascuno degli indicatori descritti sopra, la distanza, il grado e il tipo di deviazione dal modello stilizzato e standardizzato della L2.Sulla base di tale misura, si proverà a definire un metodo di valutazione delle ‘performance’ dell’apprendente e di evidenziare le necessità di intervento.•Linea 3) Riproduzione e modificazione sintetica di profili tonaliLa terza linea di ricerca intende implementare alcune tecniche già sperimentate (cfr. ad es Pettorino et al. 2013) di ‘trapianto prosodico’ consistenti nella modificazione per via sintetica delle produzioni in L2, cui verrà ‘sovrimposto’ il profilo prosodico del modello target.Verranno utilizzate, in prima istanza, procedure integrate nel software per l’analisi e la sintesi PRAAT (script) che consentono di modificare manualmente i profili, operando sostanzialmente sui ‘punti focali’ e sensibili della curva.Successivamente, verrà messa a punto e sperimentata una procedura automatica di estrazione dei parametri dal modello e di adattamento alle produzioni in L2.•Linea 4) Generazione automatica di profili tonali attraverso sintesi da testoL’ultima linea di ricerca rappresenta un’estensione della procedura di sintesi prosodica a partire da modelli. Si studierà la possibilità di ‘assegnare’ sinteticamente profili prosodici associati a determinati enunciati, partendo direttamente dal testo scritto.Quest’ultima fase si aggancia esplicitamente alla ricerca del progetto PRIN 2015 (CHROME) nel quale verrà applicata alla generazione comportamenti verbali di ‘agenti virtuali’ nell’ambito della descrizione di beni museali.