Genomsökning av hemsidan
Google använder program som kallas för sökrobotar eller spindlar för att upptäcka tillgängliga webbplatser. Den mest berömda heter Googlebot. Spindlarna besöker hemsidor och följer länkar som finns på dem. De går från länk till länk och samlar information. De utgår från de adresser de redan känner till, din webbplatskarta och de länkar du har på sidan.
De flesta webbsidor behöver inga begränsningar för indexering och resultatvisningar. Men om du av någon anledning vill förbjuda Google att indexera någon av dina sidor så gör du det i filen robots.txt.
När Google sedan samlat på sig den här informationen så vet Google precis vart den ska hitta den bästa möjliga sökningen för just den fras du sökte efter. Google har dessutom byggt in mer intelligens än så. Om du söker på ”pizza” är det förmodligen inte en sida där det står ordet pizza flera tusen gånger du vill ha, utan kanske en restaurang eller recept. Om du är ute efter en restaurang kommer Google hitta en närbelägen.
Tips på mer läsning!