Google doorzoekt formulieren

• Webdesign

• vrijdag, 23 mei 2008 14:45
• Laatst aangepast op vrijdag, 23 mei 2008 15:02

Google zoekt in formulieren, het is een nieuwe functie sinds ongeveer begin 2008. Het begon me op te vallen toen ik controleerde wat Google van mijn site geïndexeerd had.

Google vertelt hier zelf over.

Ik heb een privé gedeelte op mijn site, met een menu-item er naar toe. Maar ik wil niet dat Google dit indexeert. Toch gebeurde dat plotseling wel! Ik wilde dit voorkomen door met behulp van de robots.txt deze 'directory' te blokkeren. Dit heb ik gedaan door het volgende in robots.txt op te nemen:

User-agent: *
Disallow: /prive/

De meeste zoekmachines negeren nu deze directory.

Voor de duidelijkheid: prive is geen echte directory in het file system van de server. Het is een deel van een URL naar mijn website. Maar voor bezoekers en zoekmachines, en ook voor robotx.txt lijkt het een directory.

Wat Google nu doet, is een aantal woorden kiezen waarvan zij denkt dat het relevante woorden zijn op mijn website, deze invullen in het zoek-boxje van mijn website, vervolgens op de zoekknop klikken en de resultaatpagina als webpagina opnemen in haar index.

Hartstikke leuk natuurlijk, maar op deze manier komen mijn privé-paginas dus nog steeds in Google terecht (omdat ik helaas via Joomla mijn privé-paginas niet uit kan sluiten in de zoekopdracht).

Enfin, ik lig er niet wakker van, maar het is goed om te weten. Ik snap echter niet waarom Google vindt dat het woord pie nou zo interessant is op mijn website. Kijk, het woord webdesigner, dat snap ik dan wel weer.....

PS: Je kunt controleren wat er geïndexeerd door in het Google zoekveld het commando site:www.dwarshuis.com in te tikken. Of een ander domeinnaam natuurlijk.