Kinect trasforma qualsiasi superficie in un touch screen

Un nuovo prototipo può trasformare un notebook in un computer portatile, una parete in un display interattivo e il palmo della tua mano in un display per smartphone. Infatti, i ricercatori della Microsoft e della Carnegie Mellon University affermano che il loro nuovo dispositivo da spalla, chiamato OmniTouch, può trasformare qualsiasi superficie vicina in un touch screen interattivo ad hoc.





Schermata pratica: Un sistema di prova consente agli smartphone di utilizzare praticamente qualsiasi superficie come display interattivo basato sul tocco.

OmniTouch funziona riunendo un proiettore in miniatura e una telecamera di profondità a infrarossi, simile al tipo utilizzato nella console di gioco Kinect di Microsoft, per creare un sistema indossato a spalla progettato per interfacciarsi con dispositivi mobili come gli smartphone, afferma il co-inventore Chris Harrison , ricercatore post-laurea presso lo Human-Computer Interaction Institute di Carnegie Mellon a Pittsburgh ed ex stagista presso Microsoft Research. Invece di fare affidamento su schermi, pulsanti o tasti, il sistema monitora l'ambiente dell'utente per tutte le superfici disponibili e proietta un display interattivo su una o più di esse.

OmniTouch esegue questa operazione automaticamente, utilizzando le informazioni sulla profondità fornite dalla fotocamera per creare un modello 3D dell'ambiente, afferma Harrison. La telecamera acquisisce informazioni sulla profondità della scena emettendo un raggio modellato di luce infrarossa e utilizzando i riflessi per calcolare dove si trovano le superfici nella stanza. Ciò elimina la necessità di marcatori di calibrazione esterni. Il sistema ricostruisce il modello in modo dinamico mentre l'utente o la superficie si sposta, ad esempio la posizione di una mano o l'angolo o l'orientamento di un libro, in modo che le dimensioni, la forma e la posizione di queste proiezioni corrispondano a quelle delle superfici di visualizzazione improvvisate, lui dice. OmniTouch capisce cosa c'è di fronte a te e si adatta a tutto.



Il sistema monitora anche l'ambiente per rilevare qualsiasi cosa cilindrica e approssimativamente delle dimensioni di un dito per capire quando l'utente interagisce con essa, utilizzando nuovamente le informazioni sulla profondità per determinare quando un dito o le dita entrano in contatto con una superficie. Ciò consente agli utenti di interagire con superfici arbitrarie proprio come farebbero con un touch screen, afferma Harrison. Allo stesso modo, oggetti e icone sugli schermi ad hoc possono essere fatti scorrere e pizzicare per scorrere e ingrandire, proprio come su un touch screen tradizionale. In un'applicazione artistica dimostrativa, ad esempio, OmniTouch ha utilizzato una parete o un tavolo vicini come tela e il palmo della mano dell'utente come tavolozza dei colori.

La configurazione a spalla è del tutto impraticabile, ammette Hrvoje Benko , un ricercatore nel gruppo Natural Interaction Research presso Microsoft Research a Redmond, Washington, che ha anche lavorato al progetto, insieme al collega Andrew Wilson . Ma non è dove lo monti che conta, dice. La motivazione principale era spingere questa idea di trasformare qualsiasi superficie disponibile in una superficie interattiva. Tutti i componenti utilizzati in OmniTouch sono fuori catalogo e si restringono continuamente. Quindi non credo che siamo così lontani dall'essere trasformati in un ciondolo o attaccati agli occhiali, dice Benko.

Duncan Brumby , un ricercatore presso l'University College London Interaction Center, in Inghilterra, definisce OmniTouch una forma di interazione divertente e originale. Le dimensioni dello schermo dei dispositivi mobili possono essere limitanti, afferma. C'è un crescente interesse in quest'area di avere display onnipresenti e intangibili incorporati nell'ambiente, dice. E sebbene le nuove generazioni di smartphone tendano ad avere display di qualità sempre più elevata, Brumby ritiene che gli utenti sarebbero disposti a sopportare immagini proiettate di qualità inferiore, date le giuste applicazioni.



Quali applicazioni sono difficili da prevedere con precisione, afferma Harrison. È una tecnologia abilitante, proprio come i touch screen. I touch screen in sé non sono così entusiasmanti, dice: è quello che fai con loro. Ma il team ha creato diverse applicazioni di esempio; uno consente agli utenti di annotare virtualmente un documento fisico e un altro incorpora i gesti delle mani per consentire a OmniTouch di dedurre se le informazioni visualizzate devono essere rese pubbliche o private.

Usare superfici come questa non è una novità, dice Pranav mistero un ricercatore presso i Media Labs del MIT. Infatti, due anni fa, Mistry dimostrò un sistema chiamato Sesto senso , che proiettava display da un ciondolo sulle superfici vicine. Nella versione originale, Mistry utilizzava dei pennarelli per rilevare le dita dell'utente, ma afferma che da allora ha utilizzato anche una telecamera di profondità. La novità qui [con OmniTouch] è la tecnologia, dice. La novità è la precisione e renderlo più robusto.

Infatti, il team OmniTouch ha testato il sistema su 12 soggetti per vedere come si confrontava con i tradizionali touch screen. Presentando i loro risultati questa settimana all'ACM Simposio su Software e tecnologia dell'interfaccia utente a Santa Barbara, il team ha dimostrato che era possibile visualizzare pulsanti incredibilmente piccoli, di appena 16,2 millimetri, prima che gli utenti avessero problemi a cliccarci sopra. Con un touch screen tradizionale, il limite inferiore è in genere di circa 15 millimetri, afferma Harrison.



nascondere