Come la tecnologia del linguaggio naturale, gli ologrammi stanno preservando la testimonianza dell'olocausto

Negli anni '90, la US Shoah Foundation ha condotto interviste video con migliaia di sopravvissuti all'Olocausto, in modo che le loro storie non vengano mai dimenticate. La biblioteca digitale no profit attualmente ospita 53.000 testimonianze di video e negli ultimi anni si è ampliata per catturare testimonianze di coloro che furono testimoni del genocidio in Ruanda del 1994, del massacro di Nanchino del 1937 e del genocidio armeno che coincise con la prima guerra mondiale.

Ma in un'era che sta assistendo alla nascita della realtà virtuale e aumentata, per non parlare dei robot e degli assistenti virtuali, l'organizzazione ha esplorato modi più moderni per acquisire testimonianze: rappresentazioni interattive, simili a ologrammi, di sopravvissuti che possono interagire con e rispondere a domande da generazioni future.

La fondazione sta collaborando con l'USC Institute of Creative Technologies (ICT) e Conscience Display sul progetto, noto come New Dimensions in Testimony. È in lavorazione dal 2012 e alla fine sarà disponibile nei musei e nelle istituzioni di apprendimento di tutto il mondo. PCMag si è recato a Playa Vista, in California, di recente per vedere la sopravvissuta di Auschwitz, Eva Kor, dare la sua testimonianza su un palcoscenico.

Il capo del progetto, il Dr. Stephen D. Smith, direttore esecutivo della USC Shoah Foundation, ha dichiarato di "desiderare la possibilità di parlare con le persone che hanno subito il genocidio, di ascoltare direttamente i testimoni, piuttosto che vederli consegnati per diventare statistiche della storia. ".

Per cinque giorni il team di Smith ha intervistato Kor, che aveva otto anni quando è iniziata la seconda guerra mondiale. "Attraverso la registrazione delle sue risposte, possiamo creare una risorsa vivente per le generazioni future", ha affermato.

Heather Maio, amministratore delegato di Conscience Display, aveva sperimentato diverse tecnologie per musei e ambienti educativi per condividere la storia prima di conoscere il lavoro in ICT.

"Avevo fatto un test con il 3D, usando una configurazione a due telecamere, ma stavo davvero cercando una tecnologia che fosse la più lontana nella tecnologia di tipo olografico. Ho trovato ICT nel 2010 e ho portato l'intero progetto alla USC Shoah Foundation."

Maio voleva andare oltre la tradizionale testimonianza narrativa e decise di ricercare l'elaborazione del linguaggio naturale in modo che i visitatori del museo potessero avere un vero dialogo con i testimoni registrati.

Gran parte del riconoscimento vocale è ancora in fase di sviluppo. "Abbiamo inserito l'ASR (Automatic Speech Recognition) di Google, che è il miglior software linguistico disponibile sul mercato, in particolare perché ha il più grande vocabolario e fraseggio naturale e ha una comprensione del contesto", ha detto Maio. "Ma i nostri testimoni usano parole, in particolare termini polacchi e yiddish, che oggi sono meno utilizzati, a partire dall'era della seconda guerra mondiale. Tuttavia, ho notato che impara molto rapidamente e raccoglie nuove parole e capisce di più ogni giorno".

Era tempo di entrare nello studio di acquisizione digitale. Un'equipaggio stava allestendo un vasto impianto, con uno sfondo a schermo verde drappeggiato su due terzi dello spazio, in modo che l'intervistato potesse essere successivamente collocato in qualsiasi ambiente o sfondo.

Il team filma a 360 gradi tramite un rig con 112 telecamere, una combinazione di Ximea MQ042MG-CM, Red Epic M Dragons e Panasonic HC-X900. "È un progetto complesso, quindi ICT ha sviluppato sistemi personalizzati in esecuzione su Vegas Pro, di Sony, per il processo di modifica che incorpora il software creato dal team Natural Language di ICT", ha detto Maio.

Con tutti a posto, Eva Kor si è seduta al centro della configurazione della telecamera. Eva è stata scelta perché ha fondato l'organizzazione CANDLES (Children of Auschwitz Nazi Deadly Lab Experiments Survivors) nel 1984 e ha aperto il CANDLES Museum nel 1995. Ora 83 anni, e ancora acuta, ha ascoltato attentamente le istruzioni su come mantieni il busto nella stessa posizione, quindi il suo rendering digitale avrà continuità in seguito. Quindi è stato proprio come un vero set cinematografico.

"Tranquillo sul set."

"Suono!"

"Roll Panasonics."

"Controllo di tutti i panasonici!"

"Rotolo rosso."

"Ardesia, per favore."

Il ciak si è schiantato verso il basso per dare alla squadra di montaggio le loro annotazioni, tutti hanno guardato la sceneggiatura per il giorno e Smith si è appoggiato al microfono fuori dal rig della telecamera.

"Cosa ti hanno detto i tuoi genitori di Hitler e dell'occupazione?" chiese.

Kor fece un respiro profondo e descrisse dettagliatamente come i soldati ungheresi arrivarono nella piccola fattoria della sua famiglia, in un villaggio della Transilvania, in Romania.

Dopo che è stato creato un account testimone, verranno applicati i trigger audio in modo che il pubblico futuro possa porre domande in molti modi diversi e ottenere una risposta convincente da Kor. Ciò significava che Kor doveva rispondere alla stessa domanda in vari modi, solo per garantire che il software classificasse correttamente le sue risposte e applicasse le parole chiave con comprensione semantica.

Le domande che suscitavano la maggior parte delle emozioni da coloro che guardavano erano il tipo che i bambini avrebbero posto. In effetti, avevano. Le oltre 2000 domande sono state raccolte in crowdsourcing dagli studi di ricerca e molte riguardavano i dettagli quotidiani della vita di quei giorni. Kor ha ricordato i ricordi dell'infanzia, crescendo prima che la sua famiglia fosse portata ad Auschwitz. Descrisse la cucina di sua madre, i problemi con il bullismo a scuola e l'animale preferito di sua sorella gemella Miriam.

È perché Eva e Miriam sono gemelle, e così parte degli orribili esperimenti condotti nel campo, che entrambi sono sopravvissuti. Il resto della famiglia è stato ucciso all'arrivo.

Dopo un'ora di registrazione, Kor aveva bisogno di riposo. Quindi, durante una pausa del procedimento, Smith ci portò in una stanza laterale per mostrarci una testimonianza completa. L'output di ICT consente agli intervistati di essere proiettati in 2D HD, 3D, in VR o tramite qualsiasi monitor o dispositivo di visualizzazione.

Su un laptop, Smith aprì una finestra del browser e c'era Pinchas Gutter, un altro sopravvissuto all'Olocausto, con le mani appoggiate delicatamente sulle gambe, gli occhi attenti, che ci aspettavano, sembrava.

Smith mise il dito sul tasto di un laptop per far scattare Gutter. La faccia di Gutter si illuminò. Smith fece una domanda, lasciò andare il dito e Gutter rispose, proprio come se fosse seduto lì su una teleconferenza in un'altra città.

Tutti abbiamo posto una domanda: molti di noi con nazionalità diverse e quindi accenti. Ha ottenuto tutti e ha dato risposte convincenti. È stato avvincente. La sospensione della convinzione era completa.

Eva Kor era pronta per le sue prossime 100 domande in studio. Tutti sono tornati indietro. Ma la cosa sorprendente di questo progetto è che Kor risponderà alle domande della gente su quello che le è successo molto tempo dopo che ci ha lasciato nel regno fisico.