Op de Search Engine Stategies conferentie is een nieuw initiatief van de vier zoekmachines aangekondingd:
Het sitemap.xml bestand ,waar al je pagina's in kunnen staan, zal voortaan via je robots.txt bestand gevonden kunnen worden.
Voordeel voor de zoekmachine robots is dat ze sneller kunnen indexeren.
Voordeel voor de webmasters is dat ze niet bij iedere zoekmachine apart hun sitemap urls moeten aanmelden.
Zoekmachine resultaat pagina's zouden sneller nieuwe pagina's kunnen laten zien…
Er is echter geen garantie.. is er nooit.. dat je pagina's ook werkelijk geindexeerd worden.
Hoe leg je nu zo'n Sitemap.xml link via je Robots.txt?
Neem in je robots.txt een regel op:
SITEMAP:http://www.je volledige domein naam/sitemap naam.xml
Heb je meer van dit soort sitemaps, dan zet je de verwijzingen in een sitemap index bestand.
Meer informatie over de Autodiscovery for Sitemaps on Ask.com Blog en Sitemaps and URL Submission
Wil je toch nog niet vertrouwen op de nieuwe functie, dan kun je je sitemap natuurlijk ook hand matig aanmelden:
Voor Google via Webmaster Central
Voor Yahoo als Feed aanmelden in Site Explorere
Voor Ask nu via het commando:
http://submissions.ask.com/ping?sitemap=http://www.the URL of your sitemap here.xml
En voor Live… tja als jij het weet? Ik denk dat die pas later via de robots.txt zal gaan..
[…] Op de Itmentor SEO Blog kun je een artikel lezen over het Automatisch gevonden worden van je Sitemap.xml via robots.txt . […]