Usare gli occhi e le orecchie di uno smartphone per registrare ogni tua mossa

Molti di noi registrano già i luoghi in cui andiamo e le cose che facciamo utilizzando il nostro smartphone per scattare diligentemente foto e video e per aggiornare gli account dei social media. Una società chiamata ARO sta costruendo una tecnologia che raccoglie automaticamente una registrazione più completa e automatica della tua vita.





ARO è dietro un'app chiamata Saga che registra automaticamente ogni luogo in cui una persona va. Ora gli ingegneri di ARO stanno testando modi per utilizzare il barometro, le fotocamere e i microfoni in un dispositivo, insieme ai suoi sensori di posizione, per capire cosa sta facendo qualcuno e dove. Questo approccio dovrebbe debuttare nell'app Saga alla fine dell'estate o all'inizio dell'autunno.

L'attuale versione di Saga, disponibile per telefoni Apple e Android, registra automaticamente i luoghi visitati da una persona; può anche raccogliere dati sull'attività quotidiana da altri servizi, comprese le app di monitoraggio degli esercizi FitBit e RunKeeper, e può ricevere aggiornamenti da account di social media come Facebook, Instagram e Twitter. Una volta che l'app è stata in esecuzione su un telefono per un po', produce infografiche sulla vita dell'utente; ad esempio, registrando la variazione negli orari in cui lui o lei parte per lavoro al mattino.

Il software in esecuzione sui server di ARO crea e mantiene un modello dei movimenti tipici di ciascun utente. Questi modelli alimentano le funzionalità di riepilogo della vita di Saga e aiutano l'app a tracciare una persona tutto il giorno senza richiedere che i sensori siano sempre attivi, il che brucerebbe troppa durata della batteria.



Se so che starai seduto al lavoro per nove ore, possiamo disattivare la nostra politica di raccolta per attingere il minor potere possibile, afferma Andy Hickl, CEO di ARO. Saga si sveglierà e controllerà la posizione di una persona se, ad esempio, l'accelerometro di un telefono suggerisce che è in movimento; e potrebbe esserci conferma da altri indizi, come il mix di reti Wi-Fi nel raggio del telefono. Hickl afferma che Saga consuma in genere circa l'1% della batteria di un dispositivo, molto meno di molte app popolari per e-mail, mappe o social network.

Quel consumo è abbastanza basso, dice Hickl, che Saga può permettersi di aumentare le informazioni che raccoglie accedendo a sensori telefonici aggiuntivi. Dice che occasionalmente il campionamento dei dati dal barometro, dalle fotocamere e dai microfoni di un telefono consentirà a Saga di registrare dettagli come quando una persona è entrata in una sala conferenze per una riunione o ha visitato Starbucks, da sola o in compagnia.

La versione Android di Saga ha recentemente iniziato a utilizzare il barometro presente in molti smartphone per distinguere luoghi vicini l'uno all'altro. Le variazioni di pressione possono essere utilizzate per distinguere meglio luoghi simili, afferma Ian Clifton, che guida lo sviluppo della versione Android di ARO. Potrebbe essere il primo piano rispetto al terzo piano dello stesso edificio, ma anche all'interno di un veicolo rispetto al suo esterno, anche nello stesso spazio fisico.



ARO sta testando internamente versioni di Saga che campionano luce e suono dall'ambiente di una persona. Clifton afferma che l'uso del microfono di un telefono per raccogliere brevi impronte acustiche di luoghi diversi può essere un prezioso segnale aggiuntivo di posizione e consentire deduzioni su ciò che una persona sta facendo. A volte non siamo sicuri se sei in Starbucks o nel bar accanto, dice Clifton. Con le impronte digitali acustiche, anche se le letture del sensore [posizione] sono simili, possiamo distinguerlo.

Di tanto in tanto, campionare la luce intorno a un telefono usando la sua fotocamera fornisce un altro tipo di segnale extra dell'attività di una persona. Se passi dalla luce ambientale alla luce naturale, questo ci direbbe che il tuo contesto è cambiato, afferma Hickl. Con l'aiuto di queste informazioni dovrebbe essere possibile per Saga imparare la differenza tra, diciamo, le diverse aree di un ufficio.

In definitiva, il campionamento dei dati di luce, suono e pressione consentirà ai modelli di apprendimento automatico di Saga di riempire più dettagli della vita di un utente, afferma Hickl. [Quando] vado a casa oggi e trascorro 12 ore lì, da Saga che sembra un muro di niente, dice, notando che Saga potrebbe usare segnali sonori o luminosi per dedurre quando durante quel periodo a casa stava, diciamo, guardando la TV , giocando con i suoi figli o cenando.



Andrew Campbell , che conduce la ricerca sul rilevamento degli smartphone presso il Dartmouth College, afferma che l'aggiunta di funzionalità di registrazione della vita più dettagliate e automatiche è fondamentale affinché Saga o qualsiasi app simile abbia un impatto diffuso. Il rilevamento automatico solleva l'utente dall'onere di inserire molti dati, afferma. È probabile che le app di rilevamento automatico e continuo che riducono al minimo l'interazione dell'utente abbiano la meglio.

Campbell afferma che la registrazione automatica, insieme all'apprendimento automatico, dovrebbe consentire alle app di conoscere meglio anche la salute e il benessere degli utenti. Di recente ha iniziato ad analizzare i dati di una prova in cui 60 studenti hanno utilizzato un'app di registrazione della vita da lui sviluppata, chiamata bioritmo . Utilizza vari trucchi per la raccolta dei dati, incluso l'ascolto delle voci vicine per determinare quando uno studente è impegnato in una conversazione. Possiamo vedere molti modelli interessanti relativi alle prestazioni in classe, alla personalità, allo stress, alla socievolezza e alla salute, afferma Campbell. Ciò potrebbe tradursi in qualsiasi situazione di prestazioni sul posto di lavoro, come una startup, un ospedale, una grande azienda o la casa.

Il progetto di Campbell può modellare il modo in cui gestisce i suoi corsi, ma non deve fare soldi. ARO , finanziato dal cofondatore di Microsoft Paul Allen, alla fine ha bisogno di rendere redditizio il life logging. Hickl afferma di aver già iniziato a noleggiare parte della tecnologia di ARO ad altre società che desiderano essere in grado di identificare la posizione o le attività dei propri utenti. Anche i dati aggregati degli utenti di Saga dovrebbero essere preziosi, afferma.

Ora stiamo ottenendo una massa critica di utenti in alcune aree e siamo in grado di individuare le tendenze, afferma. La squadra nazionale di calcio degli Stati Uniti era a Seattle e siamo stati in grado di vedere dove l'attività si stava scaldando in giro per la città. Hickl afferma che i dati di quell'evento potrebbero aiutare le autorità cittadine o le aziende a pianificare futuri eventi calcistici a Seattle o altrove. Aggiunge che Saga potrebbe fornire intuizioni simili su molti altri modelli altrimenti invisibili della vita quotidiana.

nascondere