Een site van 200 pagina’s waarvan de helft onzichtbaar blijft in Google, we hebben allemaal dit scenario meegemaakt. Het probleem komt zelden van de inhoud: het is de sitemap die de crawlers (of verwart) aanstuurt. Het correct organiseren van dit bestand verandert de spelregels voor de snelheid van het ontdekken van pagina’s en, bij uitbreiding, voor de organische zoekmachineoptimalisatie van de website.
Sitemap XML: een diagnostisch bestand voordat het een lijst van URL’s is
We beschouwen de sitemap vaak als een eenvoudig overzicht van pagina’s. In de praktijk is het een diagnostisch hulpmiddel. Het Sitemaps-rapport van Google Search Console toont de laatste lezing van het bestand, het aantal gedetecteerde URL’s en verwerkingsfouten. Een vermelding van “succes” betekent dat het bestand correct is geanalyseerd, niet dat alle URL’s zijn geïndexeerd.
Dit onderscheid is fundamenteel. Google beschouwt de sitemap als een ontdekkingssignaal en niet als een verzoek om automatische indexering. We kunnen er een perfect geldige URL in opnemen die Google besluit niet te indexeren, vanwege gebrek aan relevantie of door duplicaatinhoud. Voordat we pagina’s aan het bestand toevoegen, controleren we dus of ze het waard zijn om erin te staan.
Om dieper in te gaan op de structuur en de beste praktijken rond dit bestand, de pagina expertsmarketing.fr van de site geeft een gedetailleerd overzicht van de geaccepteerde formaten en de veelvoorkomende fouten die prioriteit hebben om te corrigeren.
Sorteren van URL’s in de sitemap: wat we behouden, wat we verwijderen
De gebruikelijke reflex is om een automatische sitemap te genereren via een plugin (Yoast, Rank Math, All in One SEO) en deze verder met rust te laten. Het resultaat: pagina’s met tags, lege categorie-archieven, URL’s met sorteervariabelen of paginering, alles door elkaar met strategische pagina’s. De Google-crawler verspilt tijd aan nutteloze URL’s en vertraagt de verkenning van belangrijke pagina’s.
Voordat we het bestand indienen, filteren we op basis van concrete criteria:
- Elke URL moet een HTTP 200-code retourneren. Redirects (301, 302) en fouten (404, 410) hebben niets te zoeken in de sitemap.
- De pagina moet indexeerbaar zijn: geen noindex-tag in de head, geen blokkering in robots.txt.
- De inhoud moet uniek zijn. Een productpagina die in zes kleurvarianten is weergegeven met dezelfde tekst vervuilt het bestand zonder waarde toe te voegen.
- Wees voorzichtig met weespagina’s (zonder interne link): ze verdienen ofwel een link vanuit de sitestructuur, ofwel verwijdering uit de sitemap als ze niet meer nuttig zijn.
Op een e-commerce site of een portaal met honderden pagina’s kan deze sortering de sitemap soms halveren. De winst is direct: het crawl-budget concentreert zich op inhoud met een hoog SEO-potentieel.
Sitemap-index en segmentatie per thema
Wanneer de site meer dan enkele tientallen pagina’s heeft, winnen we aan leesbaarheid (voor ons en voor Google) door de sitemap te segmenteren. Het protocol sitemaps.org staat een indexbestand toe dat naar meerdere kind-sitemaps verwijst. We kunnen splitsen op type inhoud: een bestand voor blogartikelen, een ander voor servicepagina’s, een derde voor productinformatie.
Een gesegmenteerde sitemap vergemakkelijkt de diagnose in Search Console. Als het rapport een lage indexeringsgraad toont voor het “blog”-bestand maar correct voor het “services”-bestand, weten we precies waar we het probleem moeten zoeken. Met een monolithische sitemap verdwijnt deze granulariteit.
Voor sites die video’s of afbeeldingen met hoge waarde publiceren (portfolios, tutorials), bestaan er gespecialiseerde sitemaps. De video-sitemap, bijvoorbeeld, verrijkt de zoekresultaten met miniaturen. De meningen over de werkelijke impact van deze gespecialiseerde bestanden variëren afhankelijk van de grootte van de site, maar op een site met rijke visuele inhoud blijft de inspanning beperkt voor een potentiële winst in zichtbaarheid.
Indiening en verklaring van de sitemap: de nog geldige methoden
Een vaak over het hoofd gezien punt: de oude ping-eindpunt van Google-sitemap is in 2023 verwijderd. De handleidingen die nog steeds een URL van het type google.com/ping?sitemap=... aanbevelen, zijn verouderd. Het blijven gebruiken veroorzaakt geen zichtbare fout, maar de oproep heeft geen effect meer.
De momenteel erkende methoden om een sitemap te verklaren zijn er drie:
- Directe verzending via de interface van Google Search Console, in de sectie “Sitemaps”.
- De Search Console API, nuttig voor sites die worden beheerd door technische teams of automatiseringstools.
- De verklaring in het robots.txt-bestand met de richtlijn
Sitemap:gevolgd door de volledige URL van het bestand. Deze methode heeft het voordeel dat het ook werkt voor Bing en andere zoekmachines.
We combineren doorgaans de indiening via Search Console en de verklaring in robots.txt. De redundantie vormt geen probleem en dekt de situatie waarin een secundaire zoekmachine alleen de robots.txt raadpleegt.
Frequentie van updates en lastmod-tag
De lastmod-tag in de XML-sitemap geeft de datum van de laatste wijziging van een pagina aan. Google gebruikt deze als een aanwijzing om de verkenning van recent bijgewerkte inhoud te prioriteren. De valkuil: sommige CMS’en werken deze datum bij bij elke opslag, zelfs zonder echte inhoudelijke wijziging. Het signaal verliest dan alle betrouwbaarheid.
Lastmod alleen bijwerken wanneer de inhoud daadwerkelijk verandert blijft de regel. Een kunstmatige datum versnelt de indexering niet. Het kan Googlebot zelfs aanmoedigen om de pagina opnieuw te bezoeken, te constateren dat er niets nieuws is en uiteindelijk de bezoeken te spreiden.
Wat de frequentie van regeneratie van het bestand zelf betreft, een dynamische sitemap (in real-time gegenereerd of dagelijks herberekend) is geschikt voor sites die vaak publiceren. Een vitrine-site die eenmaal per maand wordt bijgewerkt, heeft geen behoefte aan een elke uur herberekende sitemap.
De sitemap vervangt geen solide interne linkstructuur, geen kwaliteitsinhoud, en geen coherente sitestructuur. Het is een aanvullende technische hefboom. Wanneer het goed georganiseerd, gefilterd en correct ingediend is, biedt het de zoekmachines precies wat ze nodig hebben om de site te verkennen zonder middelen te verspillen.
