DurfMakersWebsite bezoeken →
← Terug naar blog

Ai content op website: dit moet je technisch regelen

3 oktober 2026
Ai content op website: dit moet je technisch regelen

Ai content op website betekent dat je inhoud technisch vindbaar en bruikbaar is voor zoekmachines en ai-assistenten zoals ChatGPT en Copilot. Je regelt dat met drie zaken: crawl-toegang via robots.txt, zichtbare kerninhoud die niet achter javascript verstopt zit, en bereikbare canonical URL's met een sitemap. Let op: toegang regelen is een voorwaarde, geen garantie dat een ai-systeem je pagina ook echt citeert.

Kort samengevat:

  • Zorg dat je robots.txt en botregels voor OAI-SearchBot en GPTBot goed zijn ingesteld, en wacht circa 24 uur op de verwerking van wijzigingen.
  • Gebruik een XML-sitemap met lastmod-datum en stel canonical URL's in om dubbele content en indexeringsproblemen te voorkomen.
  • Controleer dat kerninhoud direct zichtbaar is in de server-geserveerde HTML en test mobiel, zodat AI-crawlers alles correct kunnen interpreteren.
  • Voer regelmatig Live fetch en AI-performancecontroles uit om technologische problemen tijdig te signaleren en bij te werken.
  • Bij Durfmakers krijg je vooraf alle technische instellingen, zoals robots.txt, sitemap en canonicals, inclusief de broncode en het ontwerp, zonder extra kosten achteraf.
Sneleenwebsitenodig
Maak je website technisch vindbaar
Durfmakers bouwt websites met technische vindbaarheid vanaf de eerste dag, inclusief robots.txt, sitemap en canonicals.
Bekijk de mogelijkheden

Inhoudsopgave

1. Technische checklist: robots.txt, ai-bots en indexeringsinstellingen

Je site krijgt bezoek van verschillende soorten bots, en niet allemaal doen hetzelfde. OAI-SearchBot haalt pagina's op om ze te tonen in ChatGPT Search, terwijl GPTBot content verzamelt om AI-modellen te trainen. Dat zijn twee aparte instellingen in je robots.txt, dus je kunt de ene toestaan en de andere blokkeren zonder dat ze elkaar beïnvloeden.

Wil je zichtbaar zijn in ChatGPT Search, dan adviseert OpenAI om OAI-SearchBot toegang te geven. Wil je niet dat je teksten in trainingsdata belanden, dan sluit je GPTBot apart uit. Een wijziging in robots.txt werkt niet meteen door: reken op ongeveer 24 uur voordat crawlers de nieuwe regels oppikken.

Robots.txt regelt alleen of een bot mag komen kijken. Wil je dat een pagina niet in een index belandt, gebruik dan een noindex-instructie in de meta-tags, niet een blokkade in robots.txt. Die twee worden vaak verward en dat kost je zichtbaarheid.

  • Sta OAI-SearchBot toe als je wilt verschijnen in ChatGPT Search.
  • Blokkeer GPTBot apart als je geen trainingsdata wilt leveren.
  • Gebruik noindex voor pagina's die je uit de index wilt houden, nooit robots.txt daarvoor.
  • Wacht ongeveer 24 uur na een wijziging voordat je controleert of die werkt.

Controleer je instellingen door robots.txt rechtstreeks op te vragen in je browser en door serverlogs te bekijken op bezoeken van OAI-SearchBot en GPTBot. Een eenvoudige user-agent check in je serverlogboek laat direct zien wie er al binnen is geweest.

Pro-tip: zet robots.txt-wijzigingen altijd los van andere deployments, zodat je snel kunt zien of een probleem door die wijziging komt.

Een XML-sitemap heeft vooral waarde bij nieuwe sites of sites met weinig externe links naar binnen, zo stelt Google. Voeg een lastmod-datum toe aan elke URL, zodat crawlers zien welke pagina's recent zijn aangepast en voorrang verdienen bij een nieuwe crawl.

Een sitemap is ondersteunend, geen vervanging voor een goede interne linkstructuur. Je menu en de links binnen je teksten vormen het belangrijkste pad waarlangs crawlers en ai-assistenten je site ontdekken. Een pagina die nergens intern naar verwijst, wordt meestal over het hoofd gezien, ook als hij in de sitemap staat.

Duplicate content ontstaat snel: dezelfde productpagina onder twee URL's, of een pagina met en zonder trailing slash. Google raadt een vaste volgorde aan om dat op te lossen.

  1. Gebruik een redirect wanneer een pagina definitief vervangen is door een andere URL.
  2. Zet een zelfreferentiële rel=canonical op elke pagina, zodat de pagina zichzelf als voorkeursversie aanwijst.
  3. Link intern altijd naar de canonical URL, nooit naar een variant met trackingparameters.
  4. Laat robots.txt links ongemoeid: het is geen instrument om canonicalisatie af te dwingen.

Deze volgorde voorkomt dat zoekmachines en ai-assistenten twee versies van dezelfde pagina als concurrenten van elkaar behandelen, wat je zichtbaarheid verdeelt in plaats van bundelt.

3. Zichtbare inhoud en rendering: mobile-first, javascript en structured data

Zoekmachines indexeren op basis van de mobiele versie van je site, niet de desktopversie. Dat betekent dat je hoofdtekst, koppen en metadata op mobiel precies moeten overeenkomen met wat je op desktop toont.

Google waarschuwt dat kerninhoud die pas na een klik of scroll door javascript wordt geladen, soms niet wordt meegenomen bij het indexeren. Dat geldt ook voor ai-crawlers: zien ze alleen een lege pagina-structuur, dan is er niets om te citeren.

  • Zorg dat je hoofdtekst direct in de server-gerenderde HTML staat, niet pas na een javascript-actie.
  • Test met een mobiele user-agent en met de Live fetch functie van zoekmachinetools om te zien wat er werkelijk wordt opgehaald.
  • Gebruik structured data (schema.org) alleen voor informatie die ook echt zichtbaar is op de pagina.
  • Valideer elk schema voor je live gaat, zodat je geen foutieve of verouderde markup publiceert.

**Structured data verbetert interpretatie, maar vervangt geen zichtbare inhoud of bereikbare URL's, die volgens Bing bepalend blijven voor geschiktheid bij ai-grounding.

4. Controle en validatie: URL-inspectie, ai performance en welke rapporten tellen

Je kunt gissen of je technisch in orde bent, of je kunt het checken. De URL-inspectietool van zoekmachines laat via Live fetch zien wat de crawler op dit moment daadwerkelijk ophaalt van een specifieke pagina, inclusief gerenderde html.

Bing's AI Performance rapport toont welke pagina's worden geciteerd in Copilot-antwoorden en bij welke zoekvragen dat gebeurt. Dat is waardevolle informatie om te bepalen welke pagina's je eerst optimaliseert, in plaats van overal gelijktijdig aan te sleutelen.

  • Vraag een URL op via Live fetch en vergelijk de output met wat een bezoeker daadwerkelijk ziet.
  • Bekijk het AI Performance rapport om te zien welke pagina's al geciteerd worden en waarom.
  • Dien je sitemap opnieuw in en gebruik IndexNow bij grote wijzigingen, zodat crawlers niet op hun gewone schema moeten wachten.
  • Controleer je structured data op markupfouten voordat je een pagina publiceert.

Een pagina die bij Live fetch weinig of geen content toont, heeft een technisch probleem dat je eerst oplost voordat je verder optimaliseert aan tekst of koppen.

5. Implementatiestappen vóór livegang: een uitvoerbare checklist

Voordat je site live gaat, loop je deze volgorde door. Elke stap bouwt voort op de vorige, dus overslaan kost je later tijd.

  1. Stel robots.txt en de afzonderlijke botregels voor OAI-SearchBot en GPTBot in (direct, binnen enkele uren).
  2. Maak de XML-sitemap aan met lastmod-data en zet canonicals op elke pagina (direct).
  3. Controleer de mobiele weergave: komt de hoofdtekst overeen met desktop en laadt niets pas na een klik (binnen 24 uur).
  4. Voeg structured data toe voor wat daadwerkelijk zichtbaar is en valideer elk schema (binnen 24 uur).
  5. Vraag indexering aan via de URL-inspectietool en dien de sitemap opnieuw in (binnen een week).
  6. Herhaal een Live fetch na ongeveer 24 uur om te bevestigen dat robots.txt-wijzigingen zijn doorgevoerd, zoals OpenAI aangeeft.

Een developer kan deze lijst letterlijk als opleverlijst gebruiken. Acceptatiecriterium per stap is simpel: toont Live fetch de juiste kerntekst, en staat de canonical correct op elke pagina.

Pro-tip: vraag je developer om een screenshot van elke Live fetch-uitkomst bij oplevering, zodat je zwart-op-wit hebt dat de site bij livegang al crawlbaar was.

6. Hoe Durfmakers dit praktisch waarborgt

Bij Durfmakers krijg je eerst de volledige site te zien op een testadres, inclusief deze technische instellingen. Je betaalt pas als je de site wilt houden. Robots.txt, sitemap, canonicals en mobiele weergave zijn standaard onderdeel van de oplevering, niet een los te bestellen extra.

Na betaling krijg je de broncode en het ontwerp in eigendom. Wil je de aanpak zelf bekijken, dan vind je op de website van Durfmakers voorbeelden van hoe teksten en techniek samen worden getest voordat een site live gaat.

7. Content afstemmen op natuurlijke taalverwerking en ai-assistenten

Ai-assistenten lezen je tekst niet als een reeks zoekwoorden, maar als taal die ze moeten begrijpen om een vraag te beantwoorden. Dat betekent dat heldere zinsopbouw en directe antwoorden zwaarder wegen dan het herhalen van een zoekterm.

Schrijf de kern van je antwoord in de eerste alinea van een pagina of sectie, net zoals je dat hier leest. Een ai-assistent die snel een antwoord moet samenvatten, pakt eerder de alinea die direct een vraag beantwoordt dan een stuk tekst dat eerst drie keer om de bush heen draait.

Vermijd vage verwijzingen zoals "dit" of "het" zonder duidelijk onderwerp. Noem het onderwerp bij naam in elke belangrijke zin, zodat een taalmodel niet moet raden waarnaar je verwijst. Korte, concrete zinnen met een duidelijk onderwerp en werkwoord zijn makkelijker te verwerken dan lange zinnen met meerdere bijzinnen.

Consistentie in terminologie helpt ook: gebruik overal dezelfde naam voor je dienst of product, in plaats van te wisselen tussen synoniemen. Een taalmodel dat drie verschillende termen voor dezelfde dienst tegenkomt, heeft meer moeite om die aan elkaar te koppelen dan wanneer je één naam consequent gebruikt.

7. Content afstemmen op natuurlijke taalverwerking en ai-assistenten — overview diagram

8. Semantische zoekmachineoptimalisatie: entiteiten linken en context bieden

Semantische seo gaat over het dupe helpen van de context: wie of wat ben je, en hoe hangt dat samen met andere bekende begrippen. Dat doe je door entiteiten, zoals bedrijfsnamen, locaties of vaktermen, consequent en herkenbaar te gebruiken.

Link relevante termen door naar pagina's die ze verder uitleggen, intern naar je eigen content en waar passend naar een gezaghebbende externe bron. Een pagina over websitebouw die verwijst naar een technische seo-training voor ontwikkelaars, geeft een zoekmachine extra context over waar jouw pagina zich in het grotere landschap bevindt.

Contextueel begrip betekent ook dat je een onderwerp niet geïsoleerd behandelt. Noem verwante begrippen in de buurt van je hoofdonderwerp, zodat een ai-systeem het verband ziet. Een pagina over "website laten maken" die ook robots.txt, sitemaps en mobile-first indexering noemt, bouwt een rijker beeld op dan een pagina die alleen over prijs en levertijd gaat.

Structured data van het type Organization of LocalBusiness versterkt dit verder, mits de gegevens kloppen met wat er daadwerkelijk op de pagina staat. Overdrijf niet met markup die niet overeenkomt met de zichtbare tekst: dat werkt averechts.

8. Semantische zoekmachineoptimalisatie: entiteiten linken en context bieden — overview diagram

9. Contentstructuur aanpassen voor betere beoordeling door ai

Een pagina met heldere koppen is makkelijker te scannen voor een crawler én voor een ai-assistent die snel moet bepalen waar het antwoord op een vraag staat. Gebruik één H1 per pagina, logische H2's per deelonderwerp en H3's alleen voor verdere onderverdeling.

Metadata zoals de title-tag en meta-description blijven belangrijk, ook al tonen ai-assistenten die niet altijd letterlijk. Ze geven een crawler een snelle samenvatting van waar de pagina over gaat, nog voordat de hoofdtekst wordt gelezen.

Korte alinea's met één duidelijk punt per stuk werken beter dan lange blokken tekst waarin meerdere ideeën samenklonteren. Een ai-systeem dat een stuk tekst moet citeren, pakt sneller een alinea die op zichzelf een volledig antwoord vormt.

Vermijd dat je belangrijkste informatie onderaan de pagina staat, na een lange inleiding. Zet het antwoord vooraan, de toelichting erna. Dat is dezelfde volgorde die je in dit artikel terugziet, en die volgorde werkt voor mensen én voor machines.

10. Content actueel houden voor ai-algoritmes

Ai-systemen geven vaker voorrang aan pagina's die recent zijn bijgewerkt, zeker bij onderwerpen waar informatie snel verandert, zoals prijzen of regelgeving. Een pagina die al jaren niet is aangepast, wekt minder vertrouwen dan een pagina met een zichtbare, recente update.

Zet een vast ritme voor controle: bekijk belangrijke pagina's minstens elk kwartaal en check of prijzen, diensten en contactgegevens nog kloppen. Werk de lastmod-datum in je sitemap bij zodra je een pagina daadwerkelijk wijzigt, niet standaard bij elke deploy.

Kleine, oprechte updates werken beter dan het kunstmatig opkrikken van een datum zonder inhoudelijke wijziging. Een crawler en een ai-assistent kunnen het verschil zien tussen een pagina die echt is bijgewerkt en een pagina waarvan alleen de datum is aangepast.

Prioriteer pagina's die al verkeer of citaties krijgen: die zijn de moeite waard om scherp te houden. Het AI Performance rapport van Bing laat precies zien welke pagina's dat zijn, zodat je niet overal tegelijk hoeft bij te werken.

11. Privacy en ethiek rond ai-gebruik van je content

Je content toegankelijk maken voor ai-crawlers betekent ook dat je nadenkt over wat je wel en niet wilt delen. Persoonsgegevens van klanten, zoals namen in testimonials of casussen, horen niet onnodig in publiek toegankelijke pagina's die door trainingscrawlers worden opgehaald.

Je kunt zelf kiezen welke bots toegang krijgen. Wil je dat je teksten niet in trainingsdata van een ai-model belanden, dan sluit je GPTBot uit terwijl je OAI-SearchBot toelaat voor zichtbaarheid in zoekresultaten, zoals eerder beschreven bij de botregels.

Transparantie naar je eigen klanten is minstens zo belangrijk. Vermeld in je privacyverklaring of en hoe content van bezoekers, zoals reviews of contactformulieren, door derden kan worden verwerkt. Dat is geen juridisch advies, maar een praktische stap die onduidelijkheid voorkomt.

Ethisch gezien geldt een simpele regel: publiceer niets waarvan je niet wilt dat het breed wordt hergebruikt, want eenmaal toegankelijk voor crawlers is content moeilijk terug te trekken uit elke ai-index.

12. Ai-optimalisatie is vooral degelijke seo en verificatie

De populaire misvatting is dat je site "AI-klaar" maakt met een los trucje, zoals een stukje extra markup. In de praktijk is het vooral het goed uitvoeren van bestaande technische seo: crawlbaarheid, zichtbare inhoud en betrouwbare links, precies wat Bing als basis noemt voor zowel klassieke zoekresultaten als ai-grounding.

Structured data helpt een machine je content sneller te interpreteren, maar vervangt geen heldere tekst en geen degelijke interne linkstructuur. Wie denkt dat een schema-markup een zwakke tekst compenseert, vergist zich.

Mijn advies: meet periodiek met Live fetch en met de ai performance rapporten die beschikbaar zijn, in plaats van één keer te checken bij livegang en het daarbij te laten. Technische vindbaarheid is geen vinkje, het is onderhoud.

— Patrick

13. Durfmakers maakt je site vanaf dag één technisch vindbaar

Bij Durfmakers betaal je pas als je de afgewerkte site daadwerkelijk wilt houden, inclusief robots.txt, sitemap en canonicals die al kloppen vóór livegang. Dat scheelt een losse technische controleronde achteraf.

Sneleenwebsitenodig

  • Pakket Start: eenmalig starttarief voor een onepager, geen abonnement.
  • Pakket Compleet: eenmalig tarief voor een site met meerdere pagina's.
  • Na betaling krijg je de broncode en het ontwerp in eigendom.

Bekijk de pakketten en vraag je proefadres aan via Durfmakers om te zien hoe je eigen site er technisch voor staat nog voor je betaalt.

Bronnen

Veelgestelde vragen

Wat betekent ai content op website precies?

Het betekent dat je content technisch vindbaar en bruikbaar is voor zowel zoekmachines als ai-assistenten zoals ChatGPT en Copilot. Dat regel je met crawl-toegang, zichtbare kerninhoud op mobiel en bereikbare canonical URL's met een sitemap.

Hoe lang duurt het voor een robots.txt-wijziging werkt?

Een wijziging in robots.txt heeft doorgaans ongeveer 24 uur nodig voordat crawlers zoals OAI-SearchBot de nieuwe regels oppikken. Controleer na die periode met een Live fetch of de wijziging is doorgevoerd.

Moet ik GPTBot altijd blokkeren?

Dat hangt af van je doel: GPTBot verzamelt content voor training, terwijl OAI-SearchBot pagina's ophaalt voor zichtbaarheid in ChatGPT Search. Je kunt ze onafhankelijk van elkaar toestaan of blokkeren in je robots.txt.

Vervangt structured data gewone tekstoptimalisatie?

Nee, structured data verduidelijkt wat er al zichtbaar op de pagina staat, maar vervangt geen heldere tekst of degelijke interne links. Bing noemt crawlbaarheid en zichtbare inhoud als de basis die bepalend blijft.

Wat kost een technisch vindbare website bij Durfmakers?

Een onepager kost eenmalig 350 euro via het pakket Start, en een site met meerdere pagina's kost eenmalig 500 euro via het pakket Compleet, zonder abonnement. Je betaalt pas als je de afgewerkte site op het testadres wilt houden.