Als je van te voren al weet dat een pagina gaat verlopen, dan kan je dit nu van te voren al doorgeven aan Google! Pagina's met acties die maar kort lopen, tijdelijk nieuws en berichten etc etc, er zijn genoeg redenen te bedenken dat je een pagina na een aantal dagen/weken/maanden niet meer geindexeerd wilt hebben.
Daar is nu een oplossing voor, sprak Product Manager Dan Crow eerst al over robots.txt en META tags, daarna over REP, nu komt hij met 2 nieuwe features voor het REP (Robots Exclusion Protocol).
Vertel wanneer een pagina verloopt!
De nieuwe META tag stelt ons in staat aan Google te vertellen wanneer een pagina verwijderd moet worden uit de zoekresultaten. De werking is vrij simpel en hetzelfde als de andere REP META tags;
Stel je wilt een pagina laten verwijderen uit de zoekresultaten op 23 september 2007 om 16.00 uur, dit doe je als volgt:
<META NAME="GOOGLEBOT" CONTENT="unavailable_after: 23-Sept-2007 16:00:00 CET">
Wel even rekening houden met het volgende; De pagina wordt weliswaar niet meer vertoond in de zoekresultaten, maar de pagina zit nog wel in de systemen van Google. Mocht je de pagina definitief willen verwijderen dan kan je dit doen via het Google Webmaster Centrum.
X-Robots-Tag
Er zijn een aantal nieuwe manier opgezet om specifieke dingen te vertellen aan google over de pagina die de robot bezoekt, en wat hij er mee moet doen.
- Geen cache van de pagina en geen snippet van de pagina tonen in de zoekresultaten;
X-Robots-Tag: noarchive, nosnippet - Deze pagina in zijn geheel niet opnemen inde zoekresultaten;
X-Robots-Tag: noindex - Een pagina laten verwijderen uit de zoekresultaten op 23 september 2007 om 16.00 uur
X-Robots-Tag: unavailable_after: 23 Sept 2007 16:00:00 CET
Uiteraard zijn alle verschillende combinaties mogelijk!
Wij hebben in iedergeval weer een paar leuke opties om mee te spelen.