Artikelen over: zoekrobot

Om de zoekresultaten samen te stellen is een zoekmachine voortdurend aan het scannen naar nieuwe pagina's en websites om deze ook toe te voegen aan de resultaten. Maar hoe gaat een zoekmachine hier mee om? En hoe kan het dat een website soms al binnen enkele minuten in de index is opgenomen terwijl een andere na een aantal weken nog steeds niet is toegevoegd?

Voor de zoekmachine optimalisatie zijn er verschillende factoren die de optimalisering vermoeilijken en daarom best vermeden kunnen worden. Zoekrobots worden steeds slimmer en kunnen steeds meer uitlezen, maar zaken als Flash of afbeeldingen zijn iets waar een zoekmachine nog altijd weinig mee kan.

Dat Google de laatste maanden veel heeft veranderd aan zijn zoekalgoritme, is geen geheim meer. Met het Google Caffeine project heeft Google veel verbeterd aan het algoritme en ook aan de rangschikking van de zoekresultaten. Voornamelijk de snelheid van indexeren was een verbetering. Maar of Google ook Javascript kon uitvoeren en begrijpen, was altijd maar de vraag. Tot voor kort.

Dat Google de datum van plaatsing vermeld in zijn zoekresultaten is zeker niet nieuw, maar wel interessant om eens van dichterbij te bekijken. Het lijkt een simpele toevoeging, maar het zegt best veel over de manier van scannen en de relevantie van het zoekresultaat.

Voor de goede orde, ik heb het dus over de datum zoals deze op deze manier wordt gebruikt in de zoekresultaten:

Een synoniem is een ander woord met dezelfde betekenis. Google weet dit ook en bij het zoeken op een zoekterm kan het dus goed zijn dat een website relevant is voor een synoniem van de ingevoerde zoekterm. Deze website kan dan alsnog in de zoekresultaten verschijnen. Dit is ook wat Google doet. Niet alleen synoniemen, maar ook vervoegingen van werkwoorden en meervouden of enkelvouden van een zoekterm herkent Google. Daarom toont Google ook websites die daarvoor voldoende relevantie vertonen tussen de zoekresultaten. Dat Google weet wat andere varianten voor een woord zijn, blijkt uit de trefwoorden tool van Adwords.

Maar hoe gaan we hier mee om voor website optimalisatie?

Sinds vorige week is Google begonnen met de uitrol van het al veel besproken project Caffeine. In dit project heeft Google de indexatie en rangschikking van de zoekresultaten opnieuw gemaakt. Het doel is om sneller en vooral relevantere zoekresultaten aan de gebruiker te kunnen tonen. Als voorproefje konden we het project al testen in de 'Sandbox' en zelf vond ik de zoekresultaten inderdaad relevanter.

De Google robot die websites indexeert voor de database van de grootste zoekmachine ter wereld heeft een selectieve werkwijze. Zo is al langer bekend dat websites die vaker bijgewerkt worden, ook vaker een bezoekje krijgen. Dit is vrij logisch, omdat Google graag op de hoogte blijft van nieuwe updates aan de website en deze zo snel mogelijk in zijn database opneemt. Maar er blijkt nog een criterium te zijn voor het al dan niet opnieuw indexeren van een pagina.

Pagina's, pagina's en nog eens pagina's. Dat is wat Google elke dag indexeert en toevoegt aan zijn toch al grote database met websites. Ze houden van pagina's daar bij Google, maar eigenlijk bedoel ik dat niet te zeggen met dit artikel.

Hoe meer pagina's een website heeft, hoe liever Google de website heeft. Meer pagina's betekenen meer informatie en meer trefwoorden, maar meer pagina's betekenen ook meer linkverwijzingen. Om die pagina's te bereiken moet een goede menustructuur aanwezig zijn om te zorgen dat alle pagina's bereikbaar zijn voor de websitebezoeker.