Comunicazione multimodale nell'interazione faccia-a-faccia e social presence nella CMC: Interfacce grafiche, vocali e bimodali a confronto

L'articolo presenta i primi risultati di un esperimento, svolto all'interno del Progetto FIRB-MIUR "Nuove tecnologie
per la formazione permanente e reti nel sistema socioeconomico italiano", che si è proposto di valutare l'utilizzazione
di Facce Parlanti ed Espressive (FPE) come interfacce uomo-macchina all'interno di un sistema e-learning. L'ipotesi di
partenza prevedeva che risultasse preferita, rispetto alle interfacce grafiche e vocali, l'interfaccia costituita da una FPE
in grado di riprodurre le condizioni di comunicazione multimodale e multicanale delle interazioni umane faccia-afaccia,
in particolare per quanto riguarda l'espressione delle emozioni e degli stati affettivi e quindi di superare le
limitazioni della CMC.
Per confrontare le diverse strategie di mantenimento della social presence nei tre diversi tipi di interfaccia sono state
analizzate innanzi tutto le modalità linguistiche e grafiche (scelte lessicali, morfologiche, interiezioni, segni di
interpunzione, grafismi, emoticon) con cui nei messaggi scritti di chat e forum vengono trasmessi stati affettivi ed
emozioni di studenti, docenti, tutor. L'individuazione di questi mezzi linguistici ha costituito un dato essenziale anche
in funzione dell'etichettatura tramite l'Affective Presentation Mark-up Language (APML) dei testi da sintetizzare
vocalmente e bimodalmente. Il materiale del test è stato creato con un sistema di risintesi basato sui programmi
LUCIA, FESTIVAL, INTERFACE, EMOTION PLAYER, messi a punto presso la Sezione di Padova dell'ISTC. I
risultati del test di valutazione confrontativa delle interfacce grafica, vocale e bimodale uditivo-visiva ai fini di una
maggiore o minore motivazione all'e-learning hanno evidenziato una complessa interazione tra la tipologia
dell'interfaccia e l'emozione veicolata.