Casa Appscout Avanti veloce: il protagonista parla Google Glass, aiutando i cani a parlare

Avanti veloce: il protagonista parla Google Glass, aiutando i cani a parlare

Video: Thad Starner on FIDO Project (Novembre 2024)

Video: Thad Starner on FIDO Project (Novembre 2024)
Anonim

Sono stato ad Austin, in Texas, il mese scorso per SXSW Interactive, dove ho avuto la possibilità di sedermi con una serie di dirigenti dell'industria tecnologica per la mia serie di video Fast Forward, tra cui Chris Becherer, vicepresidente del prodotto di Pandora.

In questa edizione di Fast Forward, stiamo parlando con Thad Starner, professore di informatica alla Georgia Tech. Thad è stato il capo tecnico di un progetto che alla fine ha portato il mondo a Google Glass, che indossava durante la nostra chat. Ma è stato nello spazio indossabile per molto più tempo e il suo lavoro si concentra sulla natura stessa dell'interfaccia uomo-macchina. Il suo lavoro più recente riguarda la costruzione di dispositivi indossabili per cani che leggono la mente. Guarda la nostra chat nel video e nella trascrizione di seguito.

Dan Costa: È un SXSW occupato. Si parla molto di realtà aumentata. Si parla molto di realtà virtuale. I wearable sono ancora un argomento molto caldo. Quando la maggior parte delle persone pensa ai dispositivi indossabili, pensa a Google Glass o a Fitbit che indossi al polso per tenere traccia dei tuoi passi. Quando pensi ai dispositivi indossabili, cosa ne pensi?

Thad Starner: Beh, per me è qualsiasi computer, qualsiasi dispositivo indossato dal corpo che ti aiuta mentre stai facendo qualche altra attività primaria. È qualsiasi computer indossato per il corpo progettato per essere secondario. Ti aiuta per qualche altra attività primaria, come rispondere alle domande durante un'intervista.

Le mie note sono sul mio iPad mini. Devo continuare a guardare in basso per ottenere le ultime note e ottenere il titolo corretto. Hai proprio questo in sé.

Sì. Tutto quello che devo fare è alzare lo sguardo, prendere un paio di parole e tornare alla conversazione. I miei vecchi sistemi, non so se hai guardato alcune delle mie vecchie foto, ma i miei vecchi sistemi avevano il display proprio qui. In effetti, ce n'era uno dal 1997 in cui era persino nell'obiettivo. A quel tempo fu realizzato da una società chiamata Micro Optical. Questo in realtà ti consente di essere abbastanza facile con un assistente intelligente che può aiutarti dal secondo al secondo. Cambia davvero la tua sicurezza e cambia la tua capacità di fare al volo cose su cui potresti inciampare normalmente.

Eri uno dei membri dell'equipaggio originale. Sembra che siete quasi in competizione per vedere chi potrebbe costruire il sistema indossabile più bello, più sofisticato e più funzionale.

Ho iniziato a realizzare il mio sistema nel 1990, ma ho fallito più e più volte. Non è stato fino al '93 che finalmente ho avuto un sistema che potevo indossare nella mia vita quotidiana. All'epoca lavoravo per un'azienda chiamata BBN. Hanno contribuito a creare i primi router per Internet. Dopo aver acceso il dispositivo, in un mese mi sono reso conto che non era solo una buona ricerca. È stato un buon stile di vita.

Ecco a cosa servono questi dispositivi. Crea uno stile di vita assassino per te. Certo, allora avevo una connessione cellulare per Internet misurata in piedi, non in bit rate. In altre parole, quanti piedi potrei camminare prima che la chiamata analogica del telefono cellulare cadesse e ho dovuto ricomporre la connessione?

Alla fine, sono tornato al MIT Media Lab e ho iniziato a reclutare sempre più studenti interessati a questo. Avevamo un piccolo convoglio di persone che produceva i dispositivi per le loro esigenze particolari e abbiamo capito come vivere come una comunità di cyborg. Ciò ha cambiato ciò che pensavamo della tecnologia. Ti faccio un esempio: supponi di venire come VIP a visitare il laboratorio. Avremo una persona che ti parlerà di quali sono i tuoi interessi. Mentre ciò accade, ci saranno messaggi che vanno avanti e indietro tra i bulbi oculari degli altri membri del gruppo che cercano di pianificare la tua giornata. "Oh, è molto interessato ai sensi aumentati. Quindi lo porti a pranzo. Devo andare all'appuntamento del dottore alle tre, quindi lo prenderò alle due." Quindi, hai queste persone che digitano sulla tastiera e si scambiano messaggi mentre la conversazione continua a cercare di programmare una giornata in base ai tuoi interessi. In un certo senso arriva allo stadio della telepatia.

Molte volte sembra molto simile a Slack, dove abbiamo comunicazione in tempo reale e diversi segmenti che prendono forma. Ma invece di renderlo basato su terminale e collegarlo a un computer, dove devi essere di fronte al tuo laptop o telefono, è ovunque tu sia. Puoi fare due cose contemporaneamente. Puoi avere quella conversazione e programmare il pranzo.

Bene, no, non vuoi farlo. Il tuo QI scende di 40 punti quando provi a farlo. Quello che vuoi fare è fare in modo che il computer supporti la conversazione. Ad esempio, abbiamo un sistema chiamato Remembrance Agent che ha un piccolo microfono che cancella il rumore, ascolta il mio lato della conversazione e tutto ciò che dico viene trascritto e inserito in un buffer di testo. E poi il computer cerca continuamente email precedenti, documenti precedenti, conversazioni precedenti che potrebbero riguardare ciò di cui stiamo parlando. Richiama piccoli promemoria nella mia visualizzazione dei dettagli che potrei voler includere in questa conversazione. Quindi supporta la conversazione, mi fornisce informazioni.

Avevo uno studente che mi parlava del riconoscimento vocale, di come si desidera utilizzare il riconoscimento vocale con dispositivi indossabili. E ho detto, beh, se davvero vuoi farlo, dovresti - e ho tirato su i miei appunti mentre stiamo conversando - gli dico, dovresti davvero guardare il discorso di Steve Whittaker su Filochat del 1995. Credo aveva alcuni grandi dettagli su come fino al 93 percento della giornata della gente viene spesa nella comunicazione opportunistica. Gli ho fornito tutti questi dettagli. Il mio studente mi ha appena guardato come "come fai a sapere tutto questo?" Va tutto bene qui. Sapevo abbastanza per cercare Steve Whittaker e poi il computer mi ha fornito tutti i dettagli. Avere quel tipo di supporto in tempo reale è davvero fantastico.

Lo abbiamo anche fatto prima, dove stavo dando alcune testimonianze alla National Academy of Sciences di Washington, DC sull'aumento degli umani. Ho mostrato loro quello che stavo facendo. Avevo i miei studenti, i miei studenti universitari, di nuovo in Georgia Tech, quindi ero a Washington, i miei studenti in Georgia Tech stavano ascoltando e ho anche mostrato a tutti che avevo un feedback dal vivo su Georgia Tech. Ho messo sia le mie note di presentazione che quelle dei miei studenti che stavano suggerendo in tempo reale.

Quindi, mentre stavo testimoniando, mi dissero: "Oh, dovresti parlarne", e mi lanciarono un URL, "o dovresti parlarne" e vomitare, fornendo altre informazioni. Il panel che mi stava intervistando, hanno iniziato a fare domande agli studenti, non a me.

Ero solo un po 'il volto di tutta questa conoscenza di questo consorzio di persone al laboratorio che potevano rispondere rapidamente alle domande perché erano esperti nel settore. Ma potrebbero cercare informazioni molto più velocemente di me. Mi hanno semplicemente usato per parlare. Questi collettivi intellettuali, questa capacità di rivolgersi agli esperti, essere in grado di aiutarti in un attimo, è una cosa abbastanza potente. D'altra parte, se provi a dire "Leggi e-mail" durante una conversazione, sembri un idiota. Gli esseri umani non possono svolgere molte attività molto bene.

Non è multi-tasking. È davvero un aumento.

Giusto.

Sembra che la natura dell'essere intelligente, la natura della conoscenza, la natura dell'intelligenza sia cambiata. Prima dovevi memorizzare tutte queste cose per conversare senza fare riferimento alle tue note, e non è più il paradigma. Devi solo sapere quali domande porre ed essere connesso a un sistema in grado di fornirti quelle risposte.

C'è una certa quantità di informazioni che devi interiorizzare in modo da poterle cercare rapidamente ed essere in grado di pensare in quelle aree, ma per molte altre cose, vuoi solo la conoscenza del mondo a portata di mano e farla arrivare consegnata quando ne hai bisogno. Questa idea di recupero di informazioni just-in-time è molto potente. Questo è quello che penso accadrà nei prossimi cinque o 10 anni. Avremo questi assistenti intelligenti che possono aiutarci secondo per secondo.

Questa è una delle grandi cose sui computer indossabili. Quello che penso definisce i computer indossabili è che è qualcosa in cui il computer diventa parte di noi. Probabilmente hai usato il binocolo prima giusto? È qualcosa che raccogli. Guardi qualcosa in lontananza. Regoli la messa a fuoco. Sono un po 'schizzinosi, vero? Devi tenerli nel modo giusto e regolare la messa a fuoco ogni volta che passi da un soggetto all'altro. Li metti giù, su e giù. Non pensi al tuo binocolo come parte di te. Ma i tuoi occhiali, li indossi e li usi tutto il giorno. Li vedi attraverso. Non ci pensi. Li usi e basta. Quindi, quello che abbiamo ora con la maggior parte di questi dispositivi, la maggior parte di questi computer, i nostri smartphone, i nostri tablet; non fanno parte di noi. Sono altri.

Non appena i dispositivi si avvicinano al corpo, improvvisamente la tecnologia si allontana. Questo è il paradosso dei computer indossabili. Avvicinando la tecnologia al corpo, la toglie di mezzo. Penso che sia dove andremo in futuro. Vedremo sempre più modi in cui la tecnologia può aiutarci, renderci più potenti, più indipendenti, più sicuri e più informati su una frazione di secondo per frazione di secondo. Voglio vedere questi assistenti intelligenti andare da qualcosa con cui stai parlando; a qualcosa che fa parte di te. Qualcosa che ti assiste da un momento all'altro in modo molto proattivo.

Penso che il concetto di sperimentare il mondo attraverso la tecnologia invece di usare semplicemente la tecnologia, sia una differenza cruciale.

Questa è l'esperienza per cui ho lavorato. Molto di ciò è semplicemente la velocità di accesso. Larry Page mi ha detto: "Si tratta di ridurre il tempo tra intenzione e azione". Ero sbalordito. Ho cercato di articolare l'importanza della velocità di accesso di un dispositivo. Qui lo ha fatto in una frase. Il tempo tra intenzione e azione è cruciale.

Una delle demo che faccio è che tutti completino due compiti. Li faccio alzare la mano dopo aver completato ogni compito. Quindi, dirò qualcosa del tipo "Okay, che ore sono?" Alzerò la mano perché in questo momento il mio tempo è nella parte anteriore dello schermo e anche il mio pubblico completa l'attività molto rapidamente. Quindi, il secondo compito che devo fare è rispondere a una domanda del tipo "dov'è il Monte Pinatubo?" Posso alzare la mano perché porre la domanda mi ha dato la risposta sul mio schermo proprio ora. È nelle Filippine e, di fatto, ho una piccola mappa di dove si trova proprio ora sul mio schermo.

È così difficile per il mio pubblico ottenere rapidamente tali informazioni che non si preoccupano nemmeno di farlo. Sto parlando di un pubblico tecnico come Xerox Park o Georgia Tech o Stanford. Quindi eccomi qui, in un pubblico pieno di secchioni, a fare un esperimento con loro e la maggior parte di loro non si preoccupa nemmeno di cercare di ottenere queste informazioni perché sanno che ci vorrà troppo tempo.

E se potessimo cambiarlo da qualcosa che impiega troppo tempo a qualcosa che è facile come controllare il tempo. Improvvisamente, rendi le persone molto più potenti. Se riesci a ridurre il tempo di intenzione di agire entro due secondi o meno, improvvisamente le persone lo faranno senza pensarci. Fa parte di loro. Una volta che supera i due secondi, il uso scende esponenzialmente e la gente pensa come un "altro".

Prima di iniziare a registrare, stavamo parlando dei santi patroni. E stavamo cercando di capire di cosa fosse santo patrono San Stanislao. Ho in mano un tablet connesso a Internet. Volevo l'informazione. Ma non mi sono preoccupato di aprire Google, digitarlo e cercarlo perché non mi importava così tanto. Ma proprio avendo quella conversazione, è apparso sul tuo schermo.

Voglio dire, ce l'ho qui. Ho solo chiesto. Questo è più esplicito. Ho detto semplicemente chiesto, "San Stanislao era il santo patrono di?" - la risposta è la Polonia - e poi saltò fuori un paio di secondi dopo. È abbastanza potente. Riduce il tipo di riluttanza a cercare di trovare informazioni al riguardo nel mondo. È fantastico per me come professore perché mi fa sembrare più intelligente di me.

Questo è qualcosa che è accaduto quando ero uno studente del MIT. Stavo prendendo una lezione da Justine Cassell, e si trattava gesto . Durante una revisione prima dell'esame finale, ha chiesto, "Qual è stata l'importanza di Deixis?" Avevo tutte le note di lezione sul mio computer e potevo accedervi molto rapidamente con questa tastiera. È stato prima che il riconoscimento vocale diventasse molto buono. Quello che farei è costruire le mie frasi in modo da poter trovare la risposta in tempo per finire una frase.

Così ho alzato la mano per rispondere alla domanda. Mi ha chiamato. Dissi: "All'inizio della lezione, abbiamo detto che l'importanza del deixis era uh, uh, uh, um" perché ho fatto un errore. Ho lasciato cadere la tastiera. Sono entrato nella modalità sbagliata degli E-Mac. Dissi: "Dovrò tornare da te. Sono entrato nella modalità sbagliata".

L'intera classe si è messa a ridere. Avevano trascorso tutto questo tempo con me e non si erano resi conto che lo facevo quotidianamente. Un professore che stava frequentando la lezione con me si chinò e disse: "Ora ne voglio uno. Lo fai sempre, non è vero? Puoi raccogliere informazioni così in fretta. Sembra che faccia parte di te." Sì, questo è esattamente il motivo per cui lo faccio.

È stato sorprendente che questi professori e studenti con cui ho lavorato per anni non abbiano mai realizzato quanta assistenza mi offre il dispositivo. La prima volta che ho tenuto un discorso professionale, uno degli studenti senior si è avvicinato e mi ha detto: "È stata la migliore conversazione che ti abbia mai sentito parlare, ma perché indossavi il tuo computer?"

Non aveva idea che mentre la maggior parte delle persone ha carte indice 3 per 5, ce l'ho qui. Avere quel tipo di assistenza mi ha reso un oratore migliore. All'epoca era semplicemente strabiliante per le persone poter usare la macchina in questo modo.

Quindi, facciamo un piccolo perno. Abbiamo parlato molto dei dispositivi indossabili umani. Ora stai lavorando con i cani. Spiega il lavoro che stai facendo.

Il progetto si chiama FIDO, Facilitare le interazioni per i cani con le occupazioni. Sì, è un acronimo, ma è carino. L'idea è che ci sono tutti questi cani da lavoro là fuori. Cani che sono cani di allarme allergia o cani di allarme medico, ricerca e salvataggio, rilevamento di bombe, ispezione per TSA per contrabbando o agricoltura. Questi cani fanno molti lavori, ma hanno difficoltà a comunicare ciò che stanno percependo e cosa stanno pensando ai loro gestori.

Abbiamo avuto uno dei nostri istruttori un paio di anni fa per fare una dimostrazione. È una diabetica e una di queste persone che può svenire per mancanza di zucchero nel sangue. Ha un cane addestrato a reagire a quella situazione di allerta. Il cane va e trova la persona più vicina, le afferra e cerca di portarle da lei perché sta per svenire presto.

Prima che stia per svenire, va e viene in aiuto?

Sì. In realtà può percepire quel cambiamento nella chimica del corpo da odore e ottenere aiuto. Ciò è accaduto al gate di sicurezza dell'aeroporto di Atlanta e il cane ha fatto quello che gli era stato insegnato: è salito su un agente di sicurezza della TSA. L'addetto alla sicurezza pensava solo che il cane fosse gentile, ma il nostro addestratore ha detto: "Tra poco svenirò. Devo sedermi". Puoi immaginare che sarebbe molto meglio se il cane potesse parlare.

Quindi, abbiamo realizzato un giubbotto in cui il cane va e comunica avvisi tirando il giubbotto. Quando il sensore è attivato e dice "Seguimi. Il mio proprietario ha bisogno del tuo aiuto". Ovviamente, la prima volta che lo provi, la gente pensa che vengano fatti uno scherzo o semplicemente non ci credono. Questo cane mi ha appena parlato?

È una registrazione audio di una voce umana che dice davvero quella frase?

Sì. Dobbiamo addestrare il cane a farlo due volte perché la prima volta gli umani non ci credono.

La seconda volta, il cane dice "No, davvero! Intendo dire questa volta?"

No, dobbiamo solo ripetere la stessa cosa e sembra funzionare. Lo stiamo ancora testando. Dobbiamo testarlo su alcune persone ignare alla Georgia Tech e vedere cosa dicono. Se ti succede, sai che fa parte dei nostri test. Avremo uno dei nostri assistenti in addestramento che verrà qui per fare quella dimostrazione.

Quel cane deve imparare nuovi trucchi entro le 14:00 di questo pomeriggio?

È un dato di fatto, inizialmente pensavamo che avremmo avuto problemi a portare il cane in SXSW e quindi oggi faremo molto addestramento per essere in grado di mostrare ciò che vogliamo.

L'idea che questi cani abbiano tutte queste percezioni che possono articolarci è in qualche modo nuova. Avevamo un po 'di stampa sul nostro giubbotto FIDO e abbiamo ricevuto una telefonata dalla polizia della Georgia Tech che chiedeva se i giubbotti potessero essere usati per i cani che fanno il bombardamento. Siamo rimasti sorpresi nell'apprendere che hanno cani che annusano le bombe, hanno spiegato che i cani sono abituati a scansionare i luoghi dello sport prima che le persone entrino. "Siamo come, " Oh. Parlaci dell'annusamento della bomba. "Siamo interessati per saperne di più .

Si scopre che i cani sono addestrati per cose come polvere da sparo e C4 ma anche cose come bombe al perossido, che… hanno un odore molto diverso. Le bombe al perossido sono anche molto instabili. Se ne ottieni uno, non vuoi il cane o il conduttore da nessuna parte vicino ad esso. Polvere da sparo o C4 sono molto stabili e non è un problema. Ciò che la polizia della Georgia Tech voleva fare era che i cani avessero il loro giubbotto con due piccoli giocattoli da tirare. Se il cane odora polvere da sparo , tirano la polvere da sparo e una geo-localizza e mostra la posizione del cane sul display dell'ufficiale dove si trova il cane. Poi sanno che c'è una bomba qui ma è una bomba stabile e possono semplicemente comandare al cane di rimanere lì e abbaiare alla bomba fino a quando non riescono a trovarla rapidamente.

Se il cane tira dall'altra parte del giubbotto, è una bomba al perossido. Sappiamo che è instabile e quindi in realtà si ricorda al cane di toglierlo di mezzo e quindi si invia un diverso tipo di unità di smaltimento delle bombe.

La stessa cosa con la ricerca e il salvataggio… e questi cani da agricoltura TSA per quello che odorano nel bagaglio delle persone. Puoi e persino farlo per l'ispezione dei campi degli agricoltori. Ci sono alcune cose come il marciume della patata dolce in cui non si può dire dall'esterno che c'è un problema. È una cosa nuova nella Carolina del Nord che sta solo devastando i loro raccolti. I cani lo sentono. Puoi inviare i cani e averli in modo che possano cercare nei campi fino a quando non lo trovano. Se lo trovano, avvisano. Vedi dove sono. Tu vai lì. Puoi vedere dove si trovano, scavare le radici, confermare che in realtà sta marcendo e poi ti sbarazzi di quella parte del campo e ricominciare.

Si scopre che una volta che iniziamo a utilizzare questi cani per fare queste cose, più persone escono dalla falegnameria, vengono scoperte nuove applicazioni. Cani che annusano il tartufo, per esempio.

Questo è quello che stavo pensando.

Questo è uno dei miei preferiti. Abbiamo un hobbista che vuole giocare con noi ora su quello.

Posso prendere in prestito il cane per il fine settimana?

Esattamente.

La cosa che mi piace è che stai dando agli umani l'accesso alle percezioni del cane, che sono in molti modi superiori agli umani, e semplicemente usando la tecnologia per consentire loro di comunicare quelle percezioni.

Il loro senso dell'olfatto è 100 volte migliore di qualsiasi cosa facciamo elettronicamente. Hanno un ottimo senso dell'udito. La loro vista non è buona come la nostra, ma percepiscono in modo diverso. Se permettiamo loro di comunicare davvero meglio, potremmo essere in grado di imparare molto di più su ciò che sono in grado di fare e su come potrebbero fare meglio il loro lavoro. Certo, i cani pensano che sia molto divertente. Questo è tutto per loro.

Passiamo al feedback aptico e all'apprendimento aptico e ad alcuni sistemi che hai fatto lì. È vero che puoi insegnare a qualcuno a suonare il piano senza suonare davvero pianoforte ?

È abbastanza pazzo. Chiamiamo questa cosa l'apprendimento passivo del feedback passivo tattile. È uno dei superpoteri che i computer indossabili possono darti. L'idea che può insegnarti un'attività meccanica complessa o un'attività manuale complessa senza la tua attenzione. È abbastanza sorprendente. Lo abbiamo fatto più volte con il piano.

Supponiamo che tu voglia imparare "Inno alla gioia" di Beethoven. È uno dei più semplici che utilizziamo per le nostre dimostrazioni. Ti abbiamo messo un guanto e il guanto ha piccoli motori a vibrazione su ogni dito. Indossi l'auricolare Bluetooth e riproduce il brano più e più volte mentre parli o stai leggendo e-mail o stai guidando, qualunque cosa. Lo ignori e suona ancora e ancora la canzone. Mentre viene suonata ogni nota, tocca il dito che appartiene a quella nota. Dopo 20 minuti, hai la prima strofa di "Ode to Joy".

I prossimi 20 minuti, hai il secondo. In circa un'ora e 30 minuti di questo tocco, abbiamo dovuto spezzarlo nei pezzi giusti, ma dopo circa un'ora e trenta minuti, hai l'intera canzone. Se metti le dita verso il basso, poi poni la mano sul piano, segniamo dove è la prima nota altrimenti non lo sapresti, e la tua mano diventa posseduta e suona solo la canzone. È una di queste cose che se ti concentri troppo su di essa, non puoi farlo, ma se ti distraggo, puoi.

Suoni la canzone e, immagino, suoni i suoni nella tua testa per provare a colpire le stesse note.

Lo abbiamo fatto una volta con Chad Myers alla CNN. Non ha talento musicale. Lo abbiamo messo in mano mentre stava seguendo un uragano nel Golfo, quindi lo abbiamo portato in diretta alla CNN. Potresti vederlo avere questa paura del palcoscenico. Questo ragazzo è di fronte a 20 milioni di persone ogni giorno, eppure ha paura del palcoscenico mentre mette la mano sul pianoforte. Si vedeva che non sapeva nemmeno quale fosse la canzone. Comincia a toccarlo. Non sa cosa sarebbe successo, ma mentre continua a riconoscere la melodia. Improvvisamente il suo ritmo migliora e poi lo ripete. Lui migliora sempre di più man mano che procede. Potevi vedere questa rivelazione "oh mia parola" sulla sua faccia. Avendolo fatto un paio di volte, dirò che è una cosa molto strana.

La cosa che stiamo cercando di fare ora è figura fino a che punto possiamo andare con esso. Abbiamo iniziato con una sola nota, melodie a una mano. Quindi, il mio studente, Caitlyn, ha capito come fare gli accordi. Ora il nostro pezzo standard è la Marcia turca di Mozart. Per le persone che sono musicisti, sai che due mani sono molto diverse, ritmi molto diversi su di esse. È un pezzo abbastanza complesso che apprenderlo non è banale. Stiamo prendendo principianti completi, gettando i guanti sulle loro mani e dopo alcune sessioni, stanno giocando questo pezzo complesso. Non sto dicendo che sono grandi musicisti ma sto dicendo che conoscono la sequenza delle note. Ci siamo interessati a poi in cos'altro potremmo essere in grado di insegnare.

Una delle cose che abbiamo iniziato a guardare era scrivere. Da quando abbiamo capito come fare gli accordi, abbiamo provato a fare il braille. Il Braille coinvolge queste sei dita, quindi sono i punti o queste otto dita se ne fai la forma estesa. La maggior parte delle persone non si preoccupa di imparare il braille mentre invecchiano mentre perdono la vista. È anche una vera crisi con gli studenti. Circa il 40 percento di loro non impara mai il braille almeno non abbastanza per comunicare con l'uso. Imparare il braille per uno studente non vedente è uno dei grandi indicatori del futuro progresso scolastico e del successo economico. Questi insegnanti di braille che insegnano il braille sono itineranti, commoventi. Vanno da scuola a scuola perché non c'è abbastanza richiesta per avere un insegnante permanente in una scuola particolare.

Abbiamo iniziato a cercare guanti che potessero insegnare alle persone il Braille passivamente. La risposta è stata sì Tra quattro ore, posso darti un auricolare e questi guanti. Mentre lo fai e puoi fare quello che vuoi, e ti ripete, "La veloce volpe marrone salta sul cane pigro". Fa ogni lettera alla volta e senti la lettera sulle tue dita. Dopo circa quattro ore, dico "Qual è la lettera G" e sai che è così. Qual è la lettera A, "sai che è quello. Non solo puoi digitarlo ma puoi sentirlo. Passi il dito sopra il Pip e sapere come digitare la lettera. Tu dici "Okay, ora come lo scriverei? Okay, questo è il G." Con nostra sorpresa, funziona e basta.

Cosa pensi che stia accadendo nel cervello per consentire quel tipo di connessione? Perché non è cosciente e neanche intellettuale? È qualcos'altro tra la mente e il corpo.

Ci sono molte cose che davvero non so. Ma ci sono alcune speculazioni da parte di un mio collega che crede che ciò che sta accadendo sia che il senso del tatto è un senso umano evolutivo molto precedente che gli umani hanno ottenuto evolutivamente. Quasi tutti gli animali hanno un senso del tatto. Ciò sembra corrispondere all'idea che il tocco sia parte di una parte del nostro cervello molto bassa, molto bassa roba di tipo lucertola. Forse è l'esposizione che ci condiziona davvero a riconoscere questi schemi. Mentre cerchi di imparare qualcosa come la lingua quando dormi, non funziona molto bene perché l'audio è una cosa cerebrale molto più alta. Ecco perché non ci aspettavamo che l'esperimento relativo alle voci di immissione del testo funzionasse. La musica è roba del cervello molto bassa, mentre i sistemi del linguaggio sono considerati funzioni cerebrali più elevate.

Non è associato al linguaggio.

Giusto. Il fatto che l'apprendimento dell'immissione di testo abbia funzionato è stata una sorpresa per noi. Non siamo abbastanza sicuri di quanto lontano possiamo andare. Possiamo insegnare la lingua dei segni? Possiamo insegnare a ballare? Possiamo aiutare gli esperti a diventare più efficienti? Una delle cose che vogliamo fare è prendere alcuni lanciatori di baseball e registrare i loro movimenti del braccio e vedere se riusciamo a riprodurli nei loro tempi di inattività e aumentarne la consistenza.

Non ho idea se una qualsiasi di queste cose funzionerà. Una cosa che abbiamo provato, però, era il codice Morse. Il Braille è solo una sequenza chiave. Il codice Morse è ritmo.

Abbiamo scoperto che possiamo usare il trasduttore di induzione su vetro. Per toccare il lato della testa. Ora, questo funziona normalmente vibrando il cranio e inviando il suono direttamente alla coclea, bypassando il timpano. Questo è il motivo per cui posso indossare questo e ricevere piccoli avvisi e non avere nulla che mi blocca le orecchie, ma se il tuo colpo con 15 hertz mi sembra un tocco.

Abbiamo iniziato con l'allenamento in stile "veloce volpe marrone sopra il cane pigro", ma ora stiamo solo toccando il lato della tua testa in codice Morse e ci credi o meno tra 4 ore - sembra il momento magico dell'alfabeto -La maggior parte dei nostri partecipanti è scesa a 0 errore… quando chiediamo loro di digitare S. Possiamo mostrare loro trattini e punti su carta e possono scrivere le lettere per questo. Possiamo toccare di nuovo il lato della testa e loro possono sapere quale messaggio stiamo inviando.

Quindi quattro ore e li stiamo facendo fare durante un videogioco. Quindi ci stiamo assicurando di distrarli con un videogioco. I videogiochi si rivelano la distrazione più efficiente.

Lo sappiamo da molto tempo.

È vero. Stiamo provando esami di ammissione. Concedi loro la comprensione scritta o problemi di matematica. Si scopre che l'unico che distrae sono i videogiochi.

È una cosa interessante Oggi stavamo parlando con Poppy Crum dell'audio e del missaggio dei sensi. C'è un sacco di AR in questo spettacolo; c'è molta realtà virtuale. Alcune delle cose più interessanti stanno accadendo non solo in un certo senso, ma in una raccolta di sensi. Quindi, in questa conversazione abbiamo parlato dello spazio visivo, abbiamo parlato dello spazio audio e anche fisico. La sensazione tattile. Quando metti insieme tutte queste cose sembra davvero che le cose davvero interessanti inizino ad accadere.

Questo è tutto. Non è solo la sintesi o i sensi. È anche il fatto che è qualcosa che puoi indossare con te per tutta la giornata. Una volta che hai quel tipo di vicinanza al corpo, puoi fare ogni sorta di cose con il corpo a cui non avevamo pensato prima.

L'apprendimento del tocco tattile passivo è uno e un'altra cosa che è emersa è stata la riabilitazione del tocco tattile passivo. Anche questa è stata una sorpresa per noi. Avevamo un open house che dimostrava il nostro modo di suonare il piano e uno dei nostri colleghi del Shepherd Center - che fa molto lavoro sulle lesioni del midollo spinale - è passata e ha detto: "Ehi Thad, lo voglio per i miei pazienti". Non riuscivo a capire perché avrebbe voluto che le persone con tetraplegia praticassero il piano. Ha detto: "No, non capisci, la tetraplegia significa solo che tutti e quattro gli arti sono colpiti. I miei pazienti con una lesione parziale del midollo spinale hanno ancora alcune sensazioni e una certa destrezza. Scommetto che se indossiamo i guanti e li addestriamo a suonare il piano, che in realtà riacquisteranno qualche sensazione; miglioreranno la loro sensazione e destrezza ".

Lei aveva ragione. Abbiamo insegnato circa otto canzoni diverse in otto settimane. I partecipanti indossavano i guanti due ore al giorno, cinque giorni alla settimana e poi prendevano lezioni di piano tre volte alla settimana. Alla fine delle otto settimane, i partecipanti che avevano i guanti hanno fatto molto meglio. Hanno avuto miglioramenti significativi nella loro sensazione di mano e destrezza rispetto alle persone che hanno appena avuto normali lezioni di piano.

Quindi, l'idea che possiamo fare riabilitazione, che possiamo ingannare il tuo cervello nel dedicare sempre più risorse per spiegare questi segnali che escono dalla tua mano è semplicemente sorprendente. Non so se hai mai avuto una gamba rotta o un genitore che ha subito un intervento all'anca, ma la riabilitazione richiede molto tempo. È molto noioso ed è difficile renderlo divertente. È difficile ottenere la conformità. Se riesco solo a mettermi un guanto e far succedere la riabilitazione, e comunque, ti daremo questo superpotere che imparerai a suonare il piano alla fine, è un po 'motivante per un molta gente.

Questo è quello che stiamo attualmente facendo. Lo stiamo facendo proprio ora. Stiamo cercando di vedere se questo potrebbe aiutare con il recupero della sensazione della mano dopo l'ictus. Se questo dovesse funzionare, ci sarebbero un milione di persone all'anno che potremmo aiutare. È molto speculativo. Non abbiamo idea se funzionerà o meno, ma vedremo.

Tutto ok. Facciamo alcune domande che faccio a tutti i miei ospiti. Quali tendenze tecnologiche vedi in questo momento che ti interessano di più? cosa ti tiene sveglio la notte?

Molto poco mi tiene sveglio la notte. Dormo abbastanza bene.

Hai tre lavori.

Ho tre lavori. Non ho tempo di dormire. Molte preoccupazioni della gente per la tecnologia sono ciò che vedi sulla stampa. La realtà è molto più noiosa di ciò che molti commentatori ti faranno credere o lo faranno i film. Immagino che la cosa di cui mi preoccupo di più sia la camera di eco che i social media possono causare. Le persone possono credere alla pseudo-scienza. Le persone possono essere portate a credere a cose che non sono vere. Le persone fanno commenti sul mio lavoro, e io penso che sia sbagliato.

Lavoro molto con la comunità dei non udenti. Si scopre che insegnare a tuo figlio la lingua dei segni li aiuterà ad acquisire abilità linguistiche più velocemente. Per molto tempo le persone hanno creduto che se insegni ai tuoi figli la lingua dei segni, questo ritarderà l'inizio del linguaggio normale. È esattamente sbagliato. Insegnare la lingua dei segni dalla nascita sembra aiutare a migliorare le abilità linguistiche di tutti.

La maggior parte dei bambini non può davvero formare le parole in modo coerente fino a quando non hanno 12 mesi. Possono iniziare a formare i segni, sai cose come il latte o il cibo. Possono farlo a sei mesi. Avere dei bambini in grado di esprimersi è ciò che dà loro breve termine memoria. Impara la memoria a breve termine dall'imparare a comunicare. Quindi avere i bambini in grado di firmare sei mesi prima di quanto possano parlare può dare loro un vantaggio sulla memoria e sul linguaggio in generale. La ricerca originale aveva 20 anni, ma ora ne sono abbastanza sicuri. Quindi non è stato fino a poco tempo fa che anche la comunità medica ha detto: "Oh, dovresti insegnare non solo ai bambini non udenti, ma a tutti i bambini che parlano la lingua dei segni". È una cosa abbastanza potente.

Abbiamo un gioco chiamato Pop Sign che consente all'udito dei genitori di bambini non udenti di imparare la lingua dei segni, o di tutti i genitori di imparare la lingua dei segni, giocando su questo avvincente sito di gioco o sui loro telefoni cellulari.

Quindi, tornando alla tua domanda originale, vedo le altre situazioni in cui le persone che entrano nelle camere fanno eco specialmente con una conoscenza rara. È facile indurre le persone a seguire la strada sbagliata.

Sul lato ottimista, per cosa sei più incoraggiato e più fiducioso?

Bene, mi piacciono le cose che Elon Musk sta facendo per cercare di convertirci in energia solare. Sono il tipo di persona che aspetta che quelle tegole siano disponibili in modo da poter convertire la mia casa.

Nel mio spazio, l'informatica da indossare, l'assistente intelligente sta decollando. Vedere le vite delle persone cambiate dalla disponibilità di questo dispositivo non è solo perché sta migliorando le loro vite personali o professionali, ma sta letteralmente salvando vite sul tavolo operatorio, solo grazie alle informazioni che possiamo consegnare appena in tempo al chirurgo.

Quindi questa idea che avremo questi assistenti intelligenti che possono aiutarci su una base al secondo. Infine, stiamo arrivando sul palco in cui queste cose stanno diventando utili.

Quale gadget, un servizio o un dispositivo che usi ogni giorno, ti ha cambiato la vita? Cosa ami di più? Non puoi scegliere Google Glass.

Posso scegliere il mio prototipo precedente sistema fotografico ?

Immagino che lo permetterò.

Il sistema che avevo prima di Glass era un display Micro Optical SVB6 e la tastiera Twiddler e un computer a spalla. L'hardware non è stato il punto di svolta, è stata la capacità di prendere appunti durante le conversazioni e fare riferimento a queste note ha ha cambiato la mia vita. Se mi siedo davanti al tavolo da un vincitore del Premio Nobel a pranzo, voglio essere in grado di ricordare quella conversazione. Voglio sapere solo le cinque parole che stimoleranno la mia memoria naturale.

Si scopre che avere questa tastiera in modo da poter scrivere sotto il tavolo e prendere appunti su quella conversazione mi ha reso un essere umano molto più efficace e anche socialmente più grazioso. Una delle cose che i miei studenti sono rimasti scioccati di vedere è che prima di vedere qualcuno, tiro su il mio Rolodex. È l'ultima volta che abbiamo parlato insieme e di cosa abbiamo parlato. Mi aiuta davvero a ricaricare il cervello sulle nostre conversazioni.

Supponiamo che sto visitando un vecchio amico. Ho appunti del tipo "Ehi sì, il figlio di sua figlia stava andando al college. Stava studiando geologia; volevo metterla in contatto con mia moglie. Dovrei chiedergli se è successo." Ti consente davvero, non solo nella tua carriera professionale, ma anche di essere più sociale.

Sì, abbiamo parlato molto di questi dispositivi rendendoci più intelligenti e facendoci sembrare più intelligenti. Quell'estensione della memoria in cui sei improvvisamente connesso a più della tua vita perché puoi ricordarne di più perché puoi accedervi di più e ottenere quei promemoria in tempo reale, è un'applicazione interessante.

All'inizio dell'informatica da indossare, abbiamo fatto tre cose. Abbiamo fatto realtà aumentata / alternativa, collettivi intellettuali e memoria aumentata. Il collettivo intellettuale è una specie di social media. La realtà aumentata è di gran moda in questi giorni. Molte persone non si rendono conto che si chiamava Realtà Artificiale prima di coniare il termine Realtà Aumentata Alternata. In realtà, posso dirti perché abbiamo cambiato il nome.

Perchè lo hai fatto?

All'inizio dello studio di questa realtà artificiale, c'era un ragazzo di nome Myron Krueger, che scrisse un meraviglioso libro chiamato Artificial Reality 2 . Lo consiglio vivamente a chiunque voglia capire la Realtà Aumentata. Ad ogni modo, penso che sia stato Timothy Leary a iniziare a condurre interviste stampa in cui ha parlato della realtà virtuale e della realtà artificiale come viaggi di droga dell'LSD. All'epoca ero uno studente a scrivere una proposta di sovvenzione e non volevo che cercassero il termine Realtà Artificiale e lo vedessero affiliato con l'LSD.

Quindi ho pensato di dover trovare un altro termine da usare che non avrebbe tirato fuori qualcosa sul web che potesse mettermi nei guai, quindi abbiamo preso questa decisione consapevole di chiamarla Realtà Aumentata. Fortunatamente per me questi altri ragazzi della Boeing stavano anche cercando di usare la realtà aumentata per assemblare queste cose per fare imbracature di linee elettriche e costruire aeroplani, e hanno trovato lo stesso termine. Quindi penso di averne avuto la prima versione scritta, e su di essa c'era la prima pubblicazione. Il nome Realtà Aumentata è rimasto bloccato.

Hai ricevuto la sovvenzione?

L'ho fatto. È per questo che sono qui oggi. Grazie a NDSEG, la National Defense Science and Engineering Graduate Fellowship, credo. Se non fosse stato per voi ragazzi, non sarei qui. Non sarei un professore. Tale sovvenzione ha permesso al mio professore di assumere un ulteriore studente universitario e mi ha permesso di realizzare computer indossabili. Grazie mille.

  • Avanzamento rapido: host 'Note to Self' Manoush Zomorodi Avanzamento veloce: host 'Note to Self' Manoush Zomorodi
  • Avanti veloce: Steve Singh di SAP su automazione, affari senza frontiere Avanti veloce: Steve Singh di SAP su automazione, affari senza frontiere
  • Domande e risposte: come costruire macchine emozionali Domande e risposte: come costruire macchine emozionali

Se le persone vogliono seguirti e scoprire su cosa stai lavorando, come possono farlo online?

Il modo più semplice è andare su Google Scholar e digitare il mio nome e avrai accesso a tutti i miei documenti e fai clic su quelli più recenti. Se vuoi vedere qualcosa che è più giorno per giorno se vai nella community di Google+ sul computing indossabile, è quello che corro, provo a mettere le cose più interessanti che stanno accadendo là fuori. Almeno dalla mia ricerca e inizieremo a rivedere alcune delle cose che stanno accadendo in generale.

Avanti veloce: il protagonista parla Google Glass, aiutando i cani a parlare