Maxim Polyakov: di cosa sono fatti i motori di ricerca e come Google è diventato il principale (e lo è ancora)

Maggiore è la quantità di informazioni sul Web, più abbiamo bisogno dei motori di ricerca. Il primo posto tra loro è stato a lungo saldamente occupato da Google. Perché il suo aspetto ha rivoluzionato e cosa aspettarsi dallo sviluppo di strumenti web in futuro, ha affermato il professore di MGIMO e media manager Maxim Polyakov. Lifehacker ha fatto un riassunto della sua conferenza in una conferenza interdisciplinare Schermata_2023, che si è svolto a Mosca il 25 e 26 marzo.

Quando e perché gli utenti avevano bisogno dei motori di ricerca

Il volume di informazioni sul pianeta Terra è in costante aumento. Per secoli i dati sono stati accumulati su dispositivi analogici - prima in manoscritti e libri, poi - su dischi in vinile, su film e videocassette.

Nel 1993 c'erano archiviazione digitale dei dati. E da allora, la quota di informazioni digitali è cresciuta. Nel 2002 arriva la svolta: il volume dei dati in digitale diventa pari a quello delle fonti analogiche. L'era digitale è iniziata. Da allora, lo stock di dati digitali è cresciuto in modo esponenziale e, con esso, è aumentata anche la quantità totale di informazioni sul pianeta.

Sorge un problema: non è chiaro come trovare rapidamente ciò di cui hai bisogno in questa enorme quantità di informazioni. Questo è ciò che fanno i motori di ricerca.

Nel 1998, quando Google è entrato per la prima volta nel mercato, c'erano diversi servizi di ricerca su Internet. Ad esempio, i portali AltaVista e Lycos erano disponibili in Russia e in totale c'erano più di una dozzina di tali risorse: Netscape, Ask Jeeves, AOL, MSN e altri. Google divenne uno di loro e sconfisse i concorrenti.

Le conclusioni su come sia migliore di altri motori di ricerca, nel 1999, furono fatte dallo scienziato spagnolo Ramon Salvera. Alla fine degli anni '90, si è imbattuto in un'interessante tesi di laurea della Stanford University. Si chiamava "Research papers about Google and the Web Base" ed è stato pubblicato nel 1997. I suoi autori erano studenti laureati Sergey Brin e Larry Page.

Salvera lesse la dissertazione e testò la stringa di ricerca. E ha subito scritto un articolo per il quotidiano cittadino "Navarre Diary", che ha intitolato "The Google Revolution".

Come funzionavano i motori di ricerca prima di Google

Entra nella barra di ricerca richiesta - ad esempio, "negozio di ferramenta". L'algoritmo trova i documenti che contengono questa frase. Successivamente, il motore di ricerca conta quante volte le parole chiave vengono ripetute sulla pagina. Quei documenti, dove ci sono più riferimenti simili, ricadono nelle prime righe del problema.

Importante: il motore di ricerca non sa che tipo di pagine siano, forse siti di negozi o forse solo risorse che scrivono sulla costruzione. Pertanto, l'algoritmo non può determinare in che modo i documenti utili nei risultati della ricerca saranno utili per l'utente. Di conseguenza, una persona riceve un lungo elenco di siti e deve aprire ogni pagina e cercare a lungo quelli giusti tra loro.

Come Google ha cambiato radicalmente le regole della ricerca

La cosa principale che è apparsa su Google è il PageRank, un nuovo algoritmo di ricerca. Brin e Page hanno deciso che non sarebbe valsa la pena cercare in Internet singoli documenti su richiesta e quindi pubblicarli in un elenco. Devi esplorarli tutti in una volta. Allo stesso tempo, è importante selezionare dall'elenco generale quelli che saranno i più significativi per l'utente.

La cosa più difficile è trovare il giusto criterio che mostri l'autorità del documento. Per fare ciò, gli autori hanno sviluppato una formula speciale e hanno chiamato il valore risultante di PR - PageRank.

La scoperta rivoluzionaria dei creatori di Google: la scelta dei criteri per valutare l'importanza del documento. Sono diventati collegamenti.

La cosa principale che è stata presa in considerazione nel nuovo algoritmo è quante volte altre risorse fanno riferimento al documento. Quello che viene citato più spesso diventa il primo in classifica ed è riconosciuto come il più autorevole. Ad esempio, se sette su dieci siti fare riferimento a uno, quindi il leader è lui.

Di conseguenza, vengono selezionati diversi nodi che hanno il maggior numero di collegamenti. Inoltre, la formula tiene conto se il nostro "numero uno" trovato menziona dei documenti. Se ci sono tali pagine, salgono immediatamente nella classifica. I collegamenti ai documenti dalla parte superiore dell'elenco pesano sempre più dei collegamenti dalle fonti di seguito.

Infine utente vede i siti nei risultati di ricerca che sono veramente utili per lui. Non ha bisogno di perdere tempo ad analizzare le pagine in cui sono menzionate le parole chiave: Google lo ha già fatto per lui.

Come Google è arrivato in cima e perché detiene il comando

I fondatori di Google non hanno creato solo l'algoritmo di ricerca. Hanno sviluppato l'architettura dell'azienda e hanno escogitato i principi fondamentali del suo lavoro.

Brin e Page hanno registrato Google nel 1998 e hanno iniziato a costruire il loro futuro. società nel garage di Susan, l'amica di Brin. Sulla lavagna, i ragazzi hanno scritto: "Concentrati sull'utente". Poco dopo, hanno formulato la missione dell'azienda.

Per Google, la priorità fin dall'inizio è stata chi imposta la query di ricerca, e non le organizzazioni che hanno creato i siti e aspettano nuovi clienti. Pertanto, la società ha immediatamente deciso: pubblicità dovrebbero essere chiaramente separati dai risultati di ricerca e una persona non dovrebbe confondere i risultati di ricerca organici con gli annunci a pagamento. Questa regola ha attirato gli utenti e ha contribuito ad aumentare il pubblico.

La società ha ricevuto rapidamente il primo investimenti. Google è entrato nella top ten delle risorse Internet più popolari all'inizio del 2001 ed è salito facilmente alla quinta riga. Nel 2004 il progetto ha cessato di essere un "garage" ed è diventato pubblico. Nel 2006, la società ha acquistato YouTube e la società che ha sviluppato il sistema operativo Android. Queste acquisizioni hanno accelerato la crescita.

Nel marzo 2006, Google è salito al primo posto tra tutte le risorse Internet. Nel novembre 2009 ha perso brevemente il campionato contro Yahoo!, ma nel gennaio 2010 ha riguadagnato la sua posizione e rimane ancora in testa.

Oggi, Google per gli utenti è diverse piattaforme:

• Algoritmo di ricerca.
• Servizio di pubblicità contestuale.
• Navigatore.
• Sistema operativo per smartphone.
• Decine di servizi per utenti comuni e aziende: posta, mappe, documenti, fogli di calcolo e molto altro.

Un motivo importante per il successo dell'azienda è cultura aziendale.

Brin e Page, quando hanno scelto un nuovo dipendente, hanno proposto di condurre un esperimento mentale: immagina di dover trascorrere sei ore con questa persona in aeroporto, perché volo è stato ritardato. Quanto sarà comodo?

In questo modo, hanno creato un ambiente in cui le persone si adattano insieme. Era necessario per lo sviluppo dell'azienda e l'emergere di innovazioni.

Tutto ciò ha portato al fatto che oggi tra tutte le richieste degli utenti ai motori di ricerca, Google rappresenta il 92,21%. Questo è un monopolio globale.

Cosa c'è di buono in "Yandex", il principale concorrente di Google in Russia

Ci sono solo due paesi in cui Google ha seri concorrenti e l'azienda non può fare nulla al riguardo. Questa è la Cina: il 68,66% delle ricerche avviene sul portale Baidu locale. E la Russia: abbiamo oltre il 45% delle richieste ricevute da "Yandex".

Questo motore di ricerca è stato creato da Ilya Segalovich e Arkady Volozh nel 1997, ovvero quasi contemporaneamente a Google. Oggi Yandex è il sito n. 1 in Russia.

Come Google, è un sistema di piattaforma. La piattaforma combina diversi servizi che coprono le diverse esigenze del cliente. In primo luogo ecco anche un motore di ricerca algoritmo. È molto buono, ma non si sa tanto su come funziona quanto sull'algoritmo di Google.

Oltre al motore di ricerca, Yandex ha una piattaforma pubblicitaria e navigatore. Più servizi aggiuntivi: posta, mappe, disco, mercato e altri. Il maggior profitto oggi è portato da Yandex Taxi e dai servizi di consegna.

Cosa cambia ChatGPT nel nostro rapporto con i motori di ricerca

Nel 2023, cioè proprio adesso, è in atto un'altra rivoluzione. Google è ancora leader e per qualche tempo manterrà il primo posto, ma non sappiamo cosa succederà dopo.

A febbraio, amministratore delegato Microsoft Satya Nadella, durante un discorso nella sede della sua azienda, ha annunciato che era iniziata una nuova era. Secondo lui, l'intera storia delle tecnologie web è divisa in tre fasi:

• Personal computer + server.
• Tecnologie mobili + sistemi di cloud storage.
• Intelligenza artificiale.

Siamo proprio all'inizio di una nuova, terza era. Anche la data di inizio è nota: lo ha detto Satya Nadella l'8 febbraio 2023.

ChatGPT guadagnato un milione di utenti in 5 giorni. Questo è l'aumento più rapido nella storia di Internet. Il leader precedente, Instagram*, ha impiegato 75 giorni per raggiungere lo stesso risultato.

La rete neurale è ora integrata nel motore di ricerca Bing. La domanda nella barra di ricerca suona così: "Chiedimi qualcosa" o "Chiedimi qualcosa". ChatGPT risponde a domande complesse e lo fa in dettaglio. Inoltre, è in grado di far fronte a compiti precedentemente utilizzati Prova di Turing. Prima di allora, ha sempre aiutato a distinguere una persona da un algoritmo di macchina, ma ora tutto è cambiato.

Sergey Brin è tornato su Google dopo cinque anni di vacanza. Ha dovuto tornare al lavoro perché l'emergere di reti neurali in azienda ha dichiarato un livello di allerta rosso. Google sta cercando di rendere attivo bardo — proprio chatbot. Si ritiene che i suoi parametri siano cinque volte maggiori delle capacità di GPT. Ma questa rete neurale non è ancora stata pienamente operativa.

*Attività di Meta Platforms Inc. e i suoi social network Facebook e Instagram sono vietati nel territorio della Federazione Russa.