Un blind test A/B riproduce due versioni dello stesso audio senza dirti quale è quale. Allinea il loudness, riproduci lo stesso breve passaggio di entrambe in ordine casuale, scegline una a ogni round e guarda i nomi dei file solo alla fine. Fai almeno 10 round. Scegliere lo stesso file 9 o più volte su 10 tirando a indovinare è improbabile (p ≈ 0,011).
Perché fare il test alla cieca
Quando sai quale file è la revisione nuova, il master costoso o il file lossless, ti aspetti che suoni meglio, e tendi a sentirlo così. Un confronto a vista, come un normale A/B test di un mix, misura insieme le tue orecchie e le tue aspettative. Un blind test toglie le etichette, così per scegliere resta solo il suono.
Il blind test vale la fatica quando una decisione è combattuta o costosa. I casi tipici sono approvare uno di due master, scegliere tra due revisioni del mix alla fine di un progetto, e controllare se un MP3 ad alto bitrate basta da inviare al posto di un WAV.
Blind A/B, ABX e doppio cieco
Questi test rispondono a domande diverse.
- Test di preferenza A/B alla cieca. Senti due versioni senza etichetta e scegli quella che preferisci. Risponde a «quale mi piace di più, quando non vedo i nomi?».
- Test ABX. Senti A e B, poi una X sconosciuta che è una delle due, e dici quale delle due è X. Risponde a «sento davvero una differenza?». È il test abituale per confrontare audio lossless e lossy.
- Test in doppio cieco. Né chi ascolta né chi conduce il test sa quale file sta suonando. Un software che mescola i file e nasconde i nomi rende un test in doppio cieco, perché nessuno nella stanza può dare un indizio.
Un test di preferenza non può dimostrare che non senti differenze. Se le tue scelte si dividono a metà, o le versioni ti suonano uguali o ti piacciono allo stesso modo. Per le decisioni di mix e mastering di solito basta, perché la domanda è quale tenere.
Come fare un blind test A/B
- Allinea il loudness. Misura i LUFS integrati di ogni file e abbassa il più forte al livello del più basso. Una differenza di circa 1 dB falsa la scelta, e in un blind test fa anche riconoscere il file più forte. La guida al level matching spiega come.
- Allinea i file. Le due versioni devono partire dallo stesso campione, così ogni round riproduce lo stesso momento del brano.
- Scegli passaggi brevi. Una o due frasi della sezione che ti interessa bastano. I passaggi lunghi ti fanno confrontare ricordi invece di suoni.
- Mescola a ogni round. L'ordine delle due versioni deve cambiare a caso da un round all'altro, altrimenti impari lo schema.
- Decidi cosa stai giudicando. Scegli una qualità per test, come il livello della voce o le basse, e giudica solo quella.
- Nascondi i nomi fino alla fine. Non guardare i risultati tra un round e l'altro, e non cambiare cuffie o volume a metà.
ABSeq ha un Blind Test che fa questi passaggi per le tracce A e B. Ogni round riproduce lo stesso breve passaggio di entrambe, mescolate ed etichettate Version A e Version B, e tu scegli quella che preferisci. Imposti da 1 a 50 round e i secondi per passaggio, Auto Gain è attivo di default, e i nomi dei file compaiono solo nei risultati. L'aiuto spiega come impostare un blind test. È un test di preferenza, non un test ABX.
Quanti round servono
Un round non ti dice niente. Con due versioni, chi tira a indovinare prende l'una o l'altra metà delle volte, quindi una sola scelta è un lancio di moneta. Su molti round, le scelte a caso si avvicinano alla metà, e una preferenza costante si nota.
| Round | Stessa scelta richiesta | Probabilità tirando a indovinare |
|---|---|---|
| 10 | 9 o più | circa 1,1% (p ≈ 0,011) |
| 16 | 12 o più | circa 3,8% (p ≈ 0,038) |
Gli stessi numeri valgono per l'ABX, dove conti le risposte corrette invece delle scelte. In 16 prove ABX, 12 o più risposte corrette hanno meno del 5% di probabilità di venire dal caso.
Più round danno una risposta più chiara ma stancano le orecchie. Se te ne servono più di 16, dividili in due sessioni con una pausa in mezzo.
Leggere i risultati
- Una preferenza netta, come 9 su 10. Senti una differenza e preferisci una versione. Tieni quella, o capisci cosa fa meglio.
- Un risultato diviso, come 6 su 10. La differenza è troppo piccola perché tu ne preferisca una su questo impianto. Scegli con altri criteri, come la dimensione del file o il costo.
- Una preferenza netta per la versione che pensavi perdesse. Controlla prima l'allineamento dei livelli. Se i livelli sono uguali, la modifica che hai fatto può aver peggiorato la traccia.
Annota l'impianto su cui hai fatto il test. Un risultato in cuffia non vale per l'auto o per lo speaker di un telefono, quindi ripeti i casi combattuti su un secondo impianto.
Blind test tra lossless e MP3 o AAC
Per verificare se senti una codifica lossy, confronta il file lossless (WAV o FLAC) con un MP3 o un AAC ricavato dallo stesso master. Allinea il loudness e controlla l'allineamento come per qualsiasi altro test. Qui di solito si sceglie un test ABX, perché la domanda è se senti una differenza, non quale ti piace.
Controlla prima il true peak del master. Un master a 0 dBFS di sample peak può avere picchi inter-sample sopra 0 dBTP, che possono clippare quando il file viene codificato in AAC o MP3. In quel caso potresti sentire il clipping, non il codec. La guida al true peak spiega la differenza, e la guida su come confrontare due file audio tratta altri controlli sui formati.
Errori comuni
- Saltare l'allineamento dei livelli, così il file più forte vince o si fa riconoscere.
- Fare tre o quattro round e prendere il risultato come definitivo.
- Guardare il punteggio a metà e poi ascoltare cercando la versione che pensi stia vincendo.
- Usare passaggi così lunghi da confrontare il ricordo di ciascuno.
- Cambiare volume o cuffie a metà test.
Domande
Cos'è un blind test A/B nell'audio?
Un blind test A/B riproduce due versioni dello stesso audio senza dirti quale è quale, e a ogni round scegli quella che preferisci. I nomi dei file compaiono solo alla fine, così la scelta viene dal suono e non dal sapere quale file è nuovo o costoso.
Che differenza c'è tra un test ABX e un test A/B?
Un test di preferenza A/B chiede quale di due versioni senza etichetta preferisci. Un test ABX riproduce A, B e una X sconosciuta, e chiede quale delle due è X, quindi verifica se senti davvero una differenza. L'ABX è il test abituale tra audio lossless e lossy.
Quanti round deve avere un blind test?
Almeno 10. In 10 round, scegliere lo stesso file 9 o più volte ha circa l'1,1% di probabilità di succedere per caso. In 16 round, 12 o più ha circa il 3,8%. Da uno a cinque round non bastano a distinguere una preferenza vera dalla fortuna.
In un blind test si sente la differenza dell'audio lossless?
Dipende da chi ascolta, dalla musica, dalla codifica e dall'impianto, quindi la risposta viene dal tuo test. Fai un test ABX con loudness allineato e file allineati, e conta le risposte corrette. In 16 prove, 12 o più risposte corrette difficilmente sono un caso.
Cos'è un test in doppio cieco nell'audio?
In un test in doppio cieco né chi ascolta né chi conduce il test sa quale file sta suonando, quindi nessuno può dare un indizio per sbaglio. Un software che mescola i file e ne nasconde i nomi fino alla fine fa da solo un test in doppio cieco.