Google en de robots.txt

Ongeveer een half jaar geleden heb ik een post geschreven over het weghalen van oude, niet correcte, webpagina’s uit de Google index. Zie hiervoor de post URL’s uit de google index. In deze post leg ik de functie ‘disallow’ in de robots.txt uit. Omdat ik hier te maken heb met parameters in de de bestandsnaam index.php maak ik gebruik van de asterix karakter:

Lees meer