Googlebot: Colleziona Link invece di Seguirli in Tempo Reale
Recentemente, Gary Illyes di Google ha rivelato che Googlebot non segue i link in tempo reale, ma li raccoglie per un'elaborazione successiva. Questa affermazione è stata fatta durante il podcast 'Search Off The Record' di Google, dove Illyes ha chiarito il comportamento del crawler di Google. Contrariamente a quanto indicato nella documentazione ufficiale di Google, che afferma che Googlebot naviga attivamente seguendo i link, Illyes ha sottolineato che il crawler raccoglie i link e poi torna a visitarli in un secondo momento. Questa discrepanza tra la comunicazione pubblica di Google e il reale funzionamento del crawler solleva interrogativi su altre possibili incomprensioni all'interno della comunità SEO. Illyes ha espresso la sua frustrazione riguardo a questa confusione, affermando che la documentazione di supporto di Google continua a dire che Googlebot segue i link, mentre in realtà non è così. Questa rivelazione ha implicazioni significative per il modo in cui comprendiamo il processo di crawling di Google. Ad esempio, se Googlebot raccoglie prima i link e poi li visita, ciò potrebbe influenzare la nostra comprensione del budget di crawling. Potrebbe anche cambiare il modo in cui consideriamo l'architettura del sito, poiché l'idea che Googlebot debba trovare pagine profonde attraverso una serie di clic potrebbe essere obsoleta. Inoltre, questa nuova comprensione potrebbe spiegare perché alcune pagine vengono crawlate più frequentemente di altre, indipendentemente dalla loro posizione nella gerarchia del sito. Molte strategie SEO si basano sull'assunto che Googlebot attraversi i siti seguendo i link interni come un visitatore. Se la descrizione di Illyes è corretta, suggerisce che il comportamento di Googlebot è più complesso di quanto si pensasse in precedenza. Anche se questa rivelazione non invalida le attuali migliori pratiche SEO, evidenzia la necessità per i professionisti del settore di rimanere informati sulle sfumature del funzionamento di Google.