Disfluenza
Anche: intercalari
Aggiornato il
Definizione
Una disfluenza è qualsiasi interruzione nel parlato fluido: intercalari come «ehm» ed «eh», parole ripetute, false partenze e autocorrezioni. Il parlato naturale ne è pieno; un testo finito non ne ha.
Togliere le disfluenze è la parte prima e più visibile del trasformare una trascrizione in scrittura. La parte sottile è distinguere il riempitivo dal significato: una parola ripetuta può essere un inciampo o un’enfasi, e una falsa partenza può essere rumore o una correzione voluta («three hundred, scratch that, four hundred dollars»).
Gli strumenti gestiscono la cosa in modi che vanno dal non farlo affatto (trascrizioni grezze) alla rimozione degli intercalari basata su regole, fino a un passaggio completo di pulizia con un modello linguistico, dove all’estremo il rischio è che riformuli cose che intendevi davvero.
I tipi di disfluenza
Pause piene: ehm, eh, mmh e i loro equivalenti in ogni lingua. Segnali discorsivi: tipo, sai, diciamo, quando non hanno significato. Ripetizioni: «la la riunione», «io io penso». False partenze: una frase abbandonata e ricominciata. Autocorrezioni: un valore sostituito da un altro, segnalato da «no wait», «scratch that», «I mean». Ognuna richiede un trattamento diverso, e l’ultima è il caso interessante, perché il risultato giusto non è togliere parole ma far sopravvivere la correzione.
Regole, modelli o entrambi
Le pause piene e le ripetizioni si possono togliere con una regola senza rischi: «ehm» non è mai una parola che intendevi. I segnali discorsivi sono più delicati, perché «tipo» a volte è un sostantivo. Le autocorrezioni sono il caso più forte a favore di una regola stretta: quando i due lati di «no wait» sono la stessa cosa, un orario, un numero o un giorno, sostituire il primo con il secondo è sicuro, e un modello non serve. Tutto ciò che è meno netto spetta a un modello linguistico con istruzioni rigide: togli ciò che non era voluto, non riscrivere mai ciò che lo era.
Il problema da tenere d’occhio
La pulizia eccessiva. Un modello a cui si chiede di far leggere bene il parlato, se ne ha l’occasione, stringerà le tue frasi, sostituirà le tue parole con le sue e toglierà la cautela che era il punto di tutto. La prova è semplice: detta qualcosa con una scelta di parole insolita e guarda se sopravvive. Uno strumento che toglie gli intercalari e tiene le tue parole sta facendo il suo lavoro; uno che migliora la tua prosa sta facendo un altro lavoro che non hai chiesto.
Come dettare con meno intercalari
Il modo più pulito per gestire gli intercalari è dirne meno. Un intercalare di solito è una pausa riempita di suono, e l’abitudine viene dalla conversazione, dove il silenzio invita qualcun altro a parlare. Uno strumento di dettatura non ti interrompe, quindi puoi fare una pausa in silenzio.
Con la Dettatura integrata di Apple hai tutto lo spazio per farlo. Apple dice che la Dettatura si interrompe automaticamente solo quando non rileva parlato per 30 secondi.
- Decidi la frase prima di iniziare la dettatura, anche solo a grandi linee.
- Pronuncia una frase alla volta e fermati alla fine.
- Quando devi pensare, chiudi la bocca e non dire niente. Una pausa silenziosa non lascia nulla nel testo.
- Rallenta un poco. Gli intercalari compaiono quando la bocca va più veloce del pensiero successivo.
- Se sbagli, finisci la frase e correggila dopo, invece di ricominciarla a metà.
- Rileggi quello che hai dettato e annota gli intercalari che usi di più, così la prossima volta li riconosci.
Perché «um» non conta nei benchmark di accuratezza?
Perché molti benchmark eliminano gli intercalari da entrambe le trascrizioni prima di contare gli errori. Il normalizzatore del testo pubblicato con l’articolo su Whisper elimina le parole hmm, mm, mhm, mmm, uh e um dal riferimento e dal risultato del modello prima di calcolare il word error rate.
In pratica, un valore di accuratezza pubblicato non ti dice nulla sugli intercalari. Un modello che scrive ogni um e uno che non ne scrive nessuno possono ottenere lo stesso punteggio. Se gli intercalari arrivano nel tuo documento dipende dallo strumento attorno al modello, e devi verificarlo tu.
Come verificare come uno strumento di dettatura gestisce le disfluenze
Una breve prova separa gli strumenti che eliminano gli intercalari con regole attente da quelli che eliminano troppo o niente. Detta ogni riga qui sotto così com’è scritta, esitazioni comprese, e confronta il risultato con quello che intendevi.
- Detta una frase con pause riempite, come: «the report is um almost uh finished». Entrambi gli intercalari dovrebbero sparire e ogni altra parola dovrebbe restare.
- Detta un inciampo, come: «I I think the the meeting moved». Le parole doppie dovrebbero comparire una volta sola.
- Detta una ripetizione voluta, come: «that was a very very long day». Entrambe le parole dovrebbero restare, perché la ripetizione serve a dare enfasi.
- Detta «like» usato come parola vera, come in: «I like the second option». La parola non deve essere eliminata.
- Detta un’autocorrezione, come: «send it Monday no wait Tuesday». Controlla se ottieni il valore corretto, entrambi i valori o quello sbagliato.
- Detta una cautela che intendi davvero, come: «I think we should probably wait». Se manca «I think» o «probably», lo strumento sta riscrivendo, non pulendo.
Le domande più frequenti.
I software di dettatura tolgono gli ehm e gli uhm?
Quelli buoni sì, in automatico, insieme alle parole ripetute e alle false partenze. I trascrittori grezzi li lasciano. Anche la dettatura integrata nella maggior parte dei sistemi ne lascia la maggior parte.
Cosa succede se mi correggo mentre detto?
Con uno strumento che gestisce le autocorrezioni, dire «Monday, no wait, Tuesday» produce Tuesday. Le implementazioni più sicure lo fanno con una regola quando i due valori sono dello stesso tipo, e lasciano i casi meno netti al modello di formattazione.
Togliere gli intercalari può cambiare quello che intendevo?
La rimozione di ehm e ripetizioni basata su regole no. Un modello linguistico libero di riscrivere sì, stringendo o riformulando. Cerca uno strumento che garantisca che le tue parole di contenuto sopravvivano, e mettilo alla prova con una frase in cui ti accorgeresti di un cambiamento.
Come smetto di dire «ehm» quando detto?
Sostituisci il suono con il silenzio. Decidi la frase prima di iniziare, pronuncia una frase alla volta e fai una pausa senza parlare quando devi pensare. Una pausa silenziosa non aggiunge nulla al testo.
Gli intercalari contano come errori nel word error rate?
Spesso no. Il normalizzatore del testo dell’articolo su Whisper, per esempio, elimina hmm, mm, mhm, mmm, uh e um da entrambe le trascrizioni prima del calcolo, quindi gli intercalari non migliorano né peggiorano il numero pubblicato.
Qual è la differenza tra un intercalare e una falsa partenza?
Un intercalare è un suono o una parola che riempie una pausa, come ehm o eh. Una falsa partenza è una frase che inizi, abbandoni e ridici in un altro modo. Sono entrambe disfluenze, ma una falsa partenza contiene parole vere, quindi eliminarla richiede più attenzione.