Apertura della ricerca a Semantic Upstart

Anche se hai una grande idea per un nuovo motore di ricerca, è tutt'altro che facile farla decollare. Per prima cosa, i migliori talenti ingegneristici risiedono nelle grandi aziende. Ancora più significativo, secondo alcune stime, l'acquisto e la manutenzione dei server necessari per indicizzare il Web nella sua interezza costano centinaia di milioni di dollari.





Tuttavia, Yahoo ha recentemente rilasciato una risorsa che potrebbe offrire speranza per cercare innovatori e imprenditori. Chiamato Build Your Own Search Service (BOSS), consente ai programmatori di utilizzare l'indice del Web di Yahoo: miliardi di pagine che vengono continuamente aggiornate, rimuovendo così forse la più grande barriera all'innovazione della ricerca. Aprendo il suo indice a migliaia di programmatori e imprenditori indipendenti, Yahoo spera che BOSS avvii progetti che non hanno tempo, denaro e risorse per inventarsi. Prabhakar Raghavan , capo di Yahoo Research e professore di consulenza presso la Stanford University, afferma che ciò potrebbe includere modi migliori per cercare video o immagini, strumenti che utilizzano i social network per classificare i risultati di ricerca o un motore di ricerca semantico che cerca di comprendere i contenuti delle pagine Web, piuttosto che solo una raccolta di parole chiave e collegamenti.

Stiamo cercando di abbattere le barriere all'innovazione, afferma Raghavan, anche se ammette che BOSS è tutt'altro che un'impresa altruistica. Se un nuovo motore di ricerca creato utilizzando l'indice di Yahoo diventa popolare e potenzialmente redditizio, Yahoo si riserva il diritto di inserire annunci accanto ai suoi risultati.

Finora, nessun sito basato su BOSS ha avuto così tanto successo. Ma un certo numero di startup stanno iniziando a costruire i propri servizi su BOSS e le società del Web semantico, in particolare, stanno beneficiando della piattaforma. Queste aziende stanno sviluppando software per elaborare concetti e significati al fine di organizzare al meglio le informazioni sul Web.

Ad esempio, Hakia , una società con sede a New York, ha iniziato a creare un motore di ricerca semantica nel 2004. I suoi algoritmi utilizzano un database di concetti (persone, luoghi, oggetti e altro) per comprendere i concetti nei documenti. Hakia crea anche mappe che collegano tra loro diversi documenti, come le pagine Web, sulla base di questi concetti per comprenderne la rilevanza reciproca. Riza Berkan, CEO dell'azienda, afferma che concentrarsi sul significato delle pagine, anziché semplicemente sui collegamenti tra di esse, potrebbe fornire risultati di ricerca più pertinenti e aiutare le persone a trovare contenuti che non sapevano nemmeno di cercare.

Tuttavia, per farlo bene, Hakia deve avere accesso a quante più pagine Web possibili, ed è qui che si inserisce BOSS. Per una determinata query, Hakia utilizza l'indice BOSS di Yahoo per determinare una serie di risultati rilevanti. Il software di Hakia determina quindi se queste pagine sono già state analizzate dal software semantico dell'azienda. In caso contrario, verranno elaborati e i risultati verranno archiviati sui server di Hakia. Eseguiamo comunque la scansione del Web, afferma Berkan. Ma senza l'indice di Yahoo, saremmo indietro sui siti che le persone stanno cercando oggi. E più pagine vengono scansionate da Hakia, migliore sarà il suo indice.

Un'altra startup semantica, chiamata Cluuz , dell'Ontario, in Canada, sta adottando un approccio leggermente diverso. Quando un utente cerca con Cluuz, vedrà i risultati di Yahoo BOSS, ma vengono riordinati in base alla tecnologia di ricerca semantica della startup. Quando fai una query, dice Alex Zivkovic, CTO di Cluuz, la passiamo a Yahoo BOSS e otteniamo un elenco di risultati... Quindi per ciascuna di quelle pagine, il motore di Cluuz analizza il contenuto, estrae entità: persone, aziende, numeri di telefono e cose del genere. Questi concetti, spiega, vengono quindi confrontati con i concetti trovati in altre pagine e i concetti che emergono più spesso sono ritenuti più rilevanti.

Invece di guardare le pagine collegate in base ai collegamenti fisici, le stiamo guardando in termini di se stanno parlando o meno degli stessi concetti, afferma Zivkovic. Questo porta a un'esperienza utente diversa, aggiunge. Ad esempio, i termini rilevanti per una query di ricerca vengono estratti dal Web ed evidenziati a destra della pagina dei risultati. Una ricerca di Kate Greene fa immediatamente apparire il mio indirizzo e-mail all'indirizzo Revisione della tecnologia , l'università che ho frequentato e un certo numero di persone che ho intervistato per storie passate. Inoltre, Cluuz fornisce altri strumenti che consentono di visualizzare facilmente i collegamenti e le relazioni tra diversi concetti semantici.

Anche con il potere dell'indice di Yahoo dietro un'azienda, non c'è alcuna garanzia che Hakia o Cluuz avranno successo. Ma se decollano, potrebbero aiutare Yahoo, che è ancora molto indietro rispetto a Google in termini di popolarità, a recuperare il vantaggio. La filosofia di base [con BOSS] è che non saremo in grado di inventare tutto da soli, afferma Raghavan. Quindi dovremmo facilitare l'innovazione.

nascondere