AI-zoekmachines kunnen zelfverzekerd klinken terwijl ze naar dode of kwalitatief minderwaardige bronnen verwijzen, blijkt uit een snelle test

Een eenvoudige controle op de herkomst (provenance) van drie populaire AI-gestuurde zoektools onthulde dat twee ervan ofwel naar dode links verwezen of hun antwoorden onderbouwden met sites met een lage geloofwaardigheid, ook al toonden alle drie dezelfde zelfverzekerde tekst en een rij bron-"chips".

De test die de verrassing veroorzaakte

Ik stelde een feitelijke, recente vraag: “What changed in the EU AI Act in 2026?” Het antwoord staat in de officiële wijzigingstekst, dus het is er wel of niet. Ik voerde de zoekopdracht in bij drie AI-zoekmachines die citaten tonen: Perplexity, de AI-modus van Google en Brave Search.

Alle drie gaven identieke feiten terug — dezelfde data, dezelfde beschrijving — dus ze eindigden gelijk wat betreft pure juistheid. De afwijking werd pas zichtbaar toen ik de geciteerde bronnen onderzocht.

Hoe ik de bronkwaliteit beoordeelde

Ik heb een scoremodel met drie niveaus gemaakt, waarbij elke citatie wordt gewogen op basis van het type host:

  • Primair (gewicht 3) – de site die de wet daadwerkelijk publiceert (bijv. het officiële EU-register).
  • Officieel (gewicht 2) – de instantie die de wet uitgeeft of houdt toezicht (overheidsdomeinen, sites van agentschappen).
  • Door gebruikers gegenereerde inhoud (UGC, gewicht 0) – platforms zoals YouTube of Reddit.

De algehele score van elke zoekmachine is het gemiddelde gewicht van de weergegeven URL's.

Zoekmachine Gerapporteerde bronnen Score
Perplexity Officiële overheidsdomeinen 2.00
Google AI-modus Adviesbureaus en een YouTube-video 1.00
Brave Search Primaire bron 3.00

Op papier zag Brave er perfect uit, Perplexity was redelijk en Google bleef achter.

De hiërarchie kijkt alleen naar de domeinnaam; het controleert niet of de gelinkte pagina daadwerkelijk laadt. Ik heb elke URL gecontroleerd. De "primaire" citatie van Brave gaf een lege pagina terug — de link was dood. De zoekmachine beweerde naar de wet te verwijzen, maar leverde niets.

Perplexity gebruikte officiële overheidsdomeinen.

Google gebruikte adviesbureaus en een YouTube-video.

Er kwamen twee duidelijke problemen aan het licht:

  1. Een kwalitatief hoogwaardig domein garandeert geen bereikbare pagina.
  2. Een goed geformuleerde samenvatting kan worden onderbouwd met bronnen met een lage geloofwaardigheid.

De gebruikersinterface verbergt beide problemen. Alle drie de tools presenteren dezelfde zelfverzekerde paragraaf en een uniforme rij bron-chips, zonder enige visuele aanwijzing dat de ene chip naar een dode pagina linkt of dat de andere naar een YouTube-tutorial verwijst in plaats van naar de wettekst.

Waarom herkomst belangrijk is voor ontwikkelaars

Ontwikkelaars kunnen herkomst omzetten in een testbare metriek:

  • Score elk antwoord met behulp van een gewogen hiërarchie vergelijkbaar met de bovenstaande.
  • Valideer de status van links automatisch; markeer lege reacties of HTTP-fouten.
  • Activeer waarschuwingen wanneer de herkomstscore van een antwoord onder een configureerbare drempelwaarde valt.

Deze aanpak is concreter dan het achterhalen van "hallucinaties" – het model kan een plausibele zin genereren, maar de controle op de herkomst vertelt je precies welke citatie (of het ontbreken daarvan) het probleem veroorzaakte, wat een gerichte oplossing mogelijk maakt.

Conclusie

Een korte test op de herkomst laat zien dat AI-zoekmachines autoritair kunnen overkomen terwijl ze naar dode of kwalitatief minderwaardige bronnen verwijzen. Ontwikkelaars die op deze zoekmachines vertrouwen, zouden de kwaliteit van citaten moeten behandelen als een meetbare eigenschap in plaats van een veronderstelde garantie, en geautomatiseerde controles in hun pipelines moeten inbouwen. Het verifiëren of een "primaire" bron daadwerkelijk laadt, kan het verschil zijn tussen een betrouwbaar antwoord en een stille valstrik van desinformatie.