Het antwoord: AI-tools kunnen razendsnel een website in elkaar zetten, maar ze regelen niet automatisch de technische SEO-basis. Zaken zoals canonieke URLs, sitemaps en robots.txt blijven vaak achterwege tenzij jij ze expliciet instelt. Google’s John Mueller waarschuwt dat ondernemers die blind vertrouwen op AI voor hun website, essentiële optimalisaties missen die bepalen of Google je site wel goed kan vinden en indexeren.

Wat er aan de hand is

John Mueller, Search Advocate bij Google, heeft in een recente uitspraak gewezen op een groeiend probleem met AI-gegenereerde websites. Hoewel AI-tools zoals websitebouwers en codegenerators indrukwekkend snel een complete site kunnen produceren, vergeten ze vaak de technische SEO-fundamenten. Mueller stelt dat deze tools niet automatisch canonieke URLs aanmaken, XML-sitemaps genereren of een robots.txt-bestand plaatsen. Dit zijn geen optionele extra’s, maar basisonderdelen die bepalen hoe zoekmachines je website begrijpen en rangschikken. De uitspraak komt op een moment dat steeds meer ondernemers AI inzetten om snel een online aanwezigheid op te bouwen, zonder dat ze zich bewust zijn van deze technische hiaten.

Wat dit betekent

Voor ondernemers betekent dit dat een AI-gebouwde website niet direct klaar is voor Google. Zonder een correcte robots.txt kan Google belangrijke pagina’s over het hoofd zien of juist pagina’s indexeren die je niet wilt tonen. Zonder canonieke URLs loop je het risico op duplicate content, wat je ranking kan schaden. En zonder een sitemap wordt het voor Google lastiger om nieuwe of gewijzigde pagina’s te ontdekken. Dit treft vooral kleine bedrijven die snel een site willen lanceren zonder technische kennis. De impact is concreet: je kunt weken of maanden verliezen voordat je site goed presteert in de zoekresultaten, terwijl een handmatige controle van deze basisinstellingen je direct een voorsprong geeft.

Hoe je dit kunt toepassen

Als je een webshop runt die met een AI-tool is gebouwd, controleer dan eerst of er een robots.txt-bestand aanwezig is. Dit bestand vertelt zoekmachines welke pagina’s ze wel en niet mogen bezoeken. Je kunt het vinden door in je browser ‘jouwdomein.nl/robots.txt’ in te typen. Staat er niks of zie je een foutmelding? Dan moet je dit bestand aanmaken. Een eenvoudige optie is om een standaard robots.txt te plaatsen die alle zoekmachines toestaat je site te crawlen, tenzij je specifieke pagina’s zoals winkelwagentjes of inlogpagina’s wilt uitsluiten.

Als je een dienstverlenend bedrijf hebt en een AI-site hebt laten maken, controleer dan de canonieke URLs. Dit zijn de voorkeurs-URL’s voor elke pagina. Zonder canonieke tag kan Google denken dat je meerdere versies van dezelfde pagina hebt, bijvoorbeeld met en zonder ‘www’ of met en zonder ‘/’ aan het einde. Dit verzwakt je ranking. Je kunt dit controleren door de broncode van je pagina’s te bekijken en te zoeken naar ‘rel=canonical’. Staat die er niet? Overweeg om een SEO-plugin of een eenvoudige code aanpassing toe te voegen die dit regelt.

Als je een team aanstuurt dat websites bouwt, zorg dan dat je een checklist hebt met technische SEO-basics die altijd worden gecontroleerd voordat een site live gaat. Voeg hieraan toe: robots.txt, XML-sitemap, canonieke URLs, en een controle of Google de site kan crawlen via Google Search Console. Je kunt deze checklist eenvoudig delen in je projectmanagementtool. Dit voorkomt dat AI-tools snelheid opleveren maar kwaliteit verliezen.

Als je zelf een AI-tool gebruikt om een website te genereren, neem dan na de lancering de tijd om de sitemap te genereren en in te dienen bij Google Search Console. Veel AI-tools bieden geen automatische sitemap aan. Je kunt een gratis online sitemapgenerator gebruiken, het bestand uploaden naar de root van je site, en het vervolgens aanmelden in Search Console. Dit helpt Google om al je pagina’s snel te vinden en te indexeren.

Bron: Search Engine Journal