Cloudflare en GoDaddy hebben een strategisch partnerschap aangekondigd om website-eigenaren en AI-ontwikkelaars transparantie en controle te geven over hoe hun content door AI wordt gebruikt. Daarnaast ondersteunen ze ook standaarden voor een betere herkenning van AI-agenten. De bedrijven willen gezamenlijk bijdragen aan het creëren van identiteit, vertrouwen en toegang tot het open agentisch web.
Fundamentele verandering internet
Het internet ondergaat een fundamentele verandering en ontwikkelt zich van een web van pagina’s, ontworpen voor mensen, tot een web dat tevens is ontworpen om systemen te ondersteunen met agenten die namens mensen handelen. Zonder duidelijke standaarden en tools dreigt deze verandering website-eigenaren, waaronder kleine bedrijven en contentmakers, te overspoelen met onherkenbaar en mogelijk kwaadaardig botverkeer. Daarom moet er een manier komen om ervoor te zorgen dat website-eigenaren de tools hebben om AI-verkeer gemakkelijk te identificeren, te beheren en te vertrouwen.
Zichtbaarheid van en controle op AI-crawlers
Vanaf nu integreert GoDaddy Cloudflare’s AI Crawl Control in diens webhostingplatform. Daarmee helpen ze website-eigenaren, waaronder kleine bedrijven en contentmakers wereldwijd, om inzicht te krijgen in en controle te hebben op hoe geautomatiseerde, door AI aangedreven crawlers toegang krijgen tot de inhoud van hun website. Zo kunnen eigenaren van websites bepalen welke AI-crawlers data mogen verzamelen, terwijl het tegelijkertijd hun site beschermt.
Identiteit en transparantie voor AI-agenten
De markt heeft niet alleen behoefte aan controle op het crawlen van websites, maar ook aan gestandaardiseerde methoden om te verifiëren wie een agent beheert en wat een agent mag doen. Het afdwingen van methoden voor constante identificatie van bots en agents die op een veilige manier interactie willen met webapplicaties, is echter een complexer probleem.
ANS is een wereldwijde open standaard, geïntroduceerd door GoDaddy, die is ontworpen om constante naamgeving, verificatie en ontdekking voor AI-agenten in verschillende systemen te ondersteunen. Dit gebeurt met behulp van andere bewezen open standaarden, het domeinnaamsysteem (DNS) en de public key infrastructuur (PKI). ANS stelt eigenaren van websites in staat om op het open web legitieme AI-agenten te onderscheiden van niet-geïdentificeerde AI-agenten, waaronder kwaadwillende imitatoren.
Transparant agentisch web
Cloudflare zet zich in voor een transparant agentisch web en ondersteunt ANS en de ontwikkeling van een breed scala aan verifieerbare standaarden voor agentidentiteit. In 2025 introduceerde Cloudflare al Web Bot Auth als nieuwe methode om cryptografie te gebruiken voor het verifiëren van bot- en agentverkeer, evenals een Signature Agent Card zodat agentontwikkelaars de identiteit en het doel van hun agent op transparante wijze kunnen delen. Met een open ecosysteem van standaarden en methoden voor het identificeren van agenten kan het agentische web zich ontwikkelen met standaard ingebouwde transparantie.
Technische architectuur
Cloudflare en GoDaddy willen samen de technische architectuur leveren die nodig is voor de overgang naar het agentgebaseerde internettijdperk en organisaties bij het volgende helpen:
- Een op toestemming gebaseerd model invoeren voor het agentgebaseerde internet: GoDaddy integreert Cloudflare’s AI Crawl Control rechtstreeks in diens hostingervaring. Dit stelt elke website-eigenaar in staat om zijn eigen voorwaarden te bepalen, door bijvoorbeeld toegang toe te staan, te blokkeren of aan te geven dat betaling is vereist, en zo de waarde van de content te beschermen.
- Vertrouwen opbouwen in AI-gestuurde handel en deze transparant maken: het identificeren van een bot is niet meer voldoende, ze moeten ook transacties kunnen verrichten. Omdat Cloudflare en GoDaddy ANS en Web Bot Auth ondersteunen, bieden ze de verifieerbare identiteitslaag die nodig is voor een functionele digitale marktplaats. Dit zorgt ervoor dat wanneer een agent een verzoek indient, of het nu gaat om een gegevensaanvraag of een autonome aankoop, zijn identiteit cryptografisch wordt ondertekend, waardoor het vertrouwen ontstaat dat nodig is voor een duurzame waarde-uitwisseling.
- Waarde-uitwisseling in het tijdperk van de ‘Answer Engine’ faciliteren: nu het internet verschuift van zoeken en klikken naar door AI gegenereerde antwoorden, zakt het traditionele, op verkeer gebaseerde verdienmodel in elkaar. Deze samenwerking biedt een technische oplossing voor die economische uitdaging. Dankzij de combinatie van gedetailleerde auditlogboeken met een transparante agentidentiteit, kunnen GoDaddy en Cloudflare een ecosysteem mogelijk maken waarin door mensen gegenereerde content de levensader van het internet blijft, maar tegelijkertijd beschermd en gecompenseerd wordt in een AI-first wereld.
AI aangedreven ecosysteem
“Het internet ontwikkelt zich tot een door AI aangedreven ecosysteem met een hoge omloopsnelheid en dat vereist een nieuw soort transparante infrastructuur,” aldus Stephanie Cohen, Chief Strategy Officer bij Cloudflare. “Door website-eigenaren de controle te geven met tools zoals AI Crawl Control en open standaarden, leggen we de essentiële basis voor een nieuw businessmodel voor het internet. We willen ervoor zorgen dat elke maker de tools heeft om te verifiëren wie er met hun site contact heeft en bieden ook legitieme AI-agenten een veilige en transparante manier om deel te nemen aan een bloeiend open web.”
“Door de samenwerking met Cloudflare aan AI Crawl Control en de Agent Name Service te promoten, een open standaard die elke agent een verifieerbare identiteit geeft op basis van DNS, kunnen we onze klanten de transparantie bieden die ze nodig hebben om zich positief te ontwikkelen in een wereld waarin AI centraal staat”, aldus Jared Sine, Chief Strategy Officer van GoDaddy. “We handelen met de snelheid van het internet en we werken samen met de hele sector om ervoor te zorgen dat het agentische open web dat ook doet.”
