De XML-sitemap is een bestand dat de meeste websites automatisch genereren, vaak zonder dat de eigenaar er aandacht aan besteedt. Dit bestand bevat een lijst van de URL’s van een site om de indexeringsrobots van Google, Bing of andere zoekmachines te begeleiden. De aanwezigheid ervan garandeert geen betere ranking, maar het ontbreken of een verkeerde configuratie kan het verkennen van strategische pagina’s vertragen of zelfs verhinderen.
Einde van de Google-ping: wat is er veranderd voor het indienen van sitemaps
Jarenlang was de standaardmethode om Google te informeren over een update van de sitemap het verzenden van een verzoek naar het endpoint /ping?sitemap= van Google. Dit mechanisme, dat breed geïntegreerd was in de SEO-plugins van WordPress en andere CMS, stelde gebruikers in staat om automatisch elke wijziging in het bestand sitemap.xml te signaleren.
Sinds 2023-2024 heeft Google dit endpoint definitief gedeactiveerd, dat nu een foutmelding 404 retourneert. Websites die deze methode via hun plugins blijven gebruiken, melden helemaal niets meer. Verschillende CMS-extensies hebben hun code nog niet bijgewerkt om deze wijziging weer te geven, wat een valse indruk van normaal functioneren creëert.
De drie methoden voor indiening die nog operationeel zijn, verdienen controle op elke site:
- De verklaring in het bestand robots.txt, via een regel Sitemap: https://voorbeeld.com/sitemap.xml, die door de robots bij elk bezoek wordt gelezen
- De handmatige indiening in het Sitemaps-rapport van Google Search Console, dat de leesstatus, de datum van de laatste crawl en het aantal ontdekte URL’s weergeeft
- De automatisering via de API Search Console Sitemaps, door Google gepresenteerd als de officiële programmaticale vervanger van de ping
Controleren welke methode uw site daadwerkelijk gebruikt, is een noodzakelijke stap voorafgaand aan elke optimalisatie van de sitemap. Een perfect gestructureerd bestand heeft geen zin als Google nooit op de hoogte is van het bestaan ervan. Voor meer informatie over Tekniko, de pagina beschrijft de technische aspecten van het opzetten van een sitemap die voldoet aan de huidige normen.
Lastmod-, priority- en changefreq-tags: wat Google echt leest in een XML-sitemap
Het XML-formaat van de sitemap biedt verschillende optionele tags voor elke vermelde URL. Drie daarvan komen systematisch terug in SEO-gidsen: lastmod, priority en changefreq. Hun werkelijke nut wijkt sterk af van wat veel tutorials suggereren.
Priority en changefreq zijn niet meer nuttig voor SEO
Google en Bing bevestigen beide dat ze de tags priority en changefreq negeren voor de crawl en ranking. Deze parameters, overgenomen uit de eerste versies van het sitemapprotocol, beïnvloeden noch de crawlfrequentie, noch de positionering van een pagina.
Sommige sitemapgeneratoren wijzen nog steeds een priority-waarde van 0.8 of 1.0 toe aan alle pagina’s, wat neerkomt op helemaal niets signaleren. Het behouden van deze tags is niet bestraffend, maar ze optimaliseren voor SEO-doeleinden is een tijdverspilling.
Betrouwbare lastmod: het enige signaal dat Google benut
De lastmod-tag daarentegen wordt nog steeds gebruikt door zoekmachines, op voorwaarde dat deze een echte wijziging van de inhoud weerspiegelt. Een lastmod-datum die overeenkomt met de laatste echte wijziging van de pagina helpt Google om prioriteit te geven aan het opnieuw crawlen van onlangs bijgewerkte URL’s.
Het veelvoorkomende probleem: veel CMS’s werken de lastmod-datum bij bij elke opslaan, zelfs zonder zichtbare wijziging van de inhoud (verandering van een plugin, globale update van het thema). Google leert sitemaps te negeren waarvan de lastmod-datums constant zonder reden veranderen. De betrouwbaarheid van deze tag beïnvloedt direct het vertrouwen dat de zoekmachine aan het bestand toekent.
Sitemap en crawlbudget: de fouten die de indexering vertragen
De sitemap beperkt zich niet tot het opsommen van URL’s. Het stuurt het crawlbudget, dat wil zeggen het aantal pagina’s dat Googlebot zal verkennen tijdens elke bezoek aan een site. Een slecht gefilterde sitemap verdunt dit budget over pagina’s zonder SEO-waarde.
Drie fouten komen regelmatig voor in technische audits:
- Pagina’s in noindex opnemen in de sitemap, wat een tegenstrijdig signaal naar de indexeringsrobots stuurt (de sitemap zegt “verken deze pagina”, de meta-tag zegt “indexeer het niet”)
- URL’s opsommen die 301-, 404- of 410-codes retourneren, waardoor Googlebot gedwongen wordt om verzoeken te verspillen aan omleidingen of dode pagina’s
- URL’s met dubbele parameters behouden (filters, sorteringen, pagineringen) die tientallen varianten voor dezelfde inhoud creëren
Een XML-sitemap zou uitsluitend de pagina’s moeten bevatten die u in de zoekresultaten wilt zien. Elke toegevoegde URL verbruikt een fractie van het crawlbudget. Op een site met enkele tientallen pagina’s blijft de impact marginaal. Op een e-commerce site of een media die dagelijks publiceert, kan een niet-gefilterde sitemap de indexering van recente inhoud met meerdere dagen vertragen.
XML-sitemap en Search Console: de gegevens over dekking interpreteren
Een sitemap indienen in Google Search Console is niet voldoende. Het bijbehorende dekkingsrapport biedt gegevens die helpen om indexeringsproblemen te diagnosticeren voordat ze het verkeer beïnvloeden.
De eerste indicator om in de gaten te houden is het verschil tussen het aantal ingediende URL’s en het aantal geïndexeerde URL’s. Een significante afwijking geeft aan dat Google weigert een deel van de vermelde pagina’s te indexeren. De redenen variëren: gedetecteerde dubbele inhoud, pagina’s die als van lage kwaliteit worden beschouwd, of technische toegankelijkheidsproblemen.
Het rapport onderscheidt ook de URL’s “ontdekt maar niet geïndexeerd” en die “gecrawld maar niet geïndexeerd”. De eerste categorie geeft aan dat Google de pagina kent maar deze nog niet heeft bezocht, vaak door een gebrek aan crawlbudget. De tweede onthult dat Google de pagina heeft gelezen en ervoor heeft gekozen deze niet te indexeren, wat wijst op een probleem met inhoud of kwaliteit.
De ervaringen verschillen over de ideale frequentie voor het controleren van deze rapporten. Voor een site waarvan de inhoud wekelijks verandert, stelt een maandelijkse controle in Search Console in staat om afwijkingen op te sporen voordat ze zich ophopen. Voor een stabiele vitrine-site is een kwartaalaudit van de sitemap en de dekking voldoende.
De XML-sitemap blijft een discreet technisch hulpmiddel, maar het onderhoud ervan bepaalt de capaciteit van Google om een site efficiënt te verkennen en te indexeren. Het controleren van de actieve indieningsmethode, het opschonen van verouderde URL’s en het bewaken van het dekkingsrapport in Search Console zijn de drie concrete acties die een meetbaar effect op de organische zichtbaarheid hebben.
