Cloudflare startet Marktplatz, der es Websites ermöglicht, AI-Bots für Scraping zu berechnen

Cloudflare, ein Anbieter von Cloud-Infrastruktur, der 20 % des Webs bedient, hat am Dienstag die Einführung eines neuen Marktplatzes angekündigt, der die Beziehung zwischen Website-Besitzern und KI-Unternehmen neu gestaltet – idealerweise um Verlegern mehr Kontrolle über ihre Inhalte zu geben.

Im vergangenen Jahr hat Cloudflare Tools für Verleger eingeführt, um dem rasanten Anstieg von AI-Crawlern entgegenzuwirken, darunter eine Ein-Klick-Lösung zum Blockieren aller AI-Bots sowie ein Dashboard, um zu sehen, wie AI-Crawler ihre Website besuchen. In einem Interview 2024 sagte Cloudflare-CEO Matthew Prince zu TechCrunch, dass diese Produkte die Grundlage für einen neuen Marktplatz legen würden, in dem Verleger ihre Inhalte an KI-Unternehmen verteilen und dafür entschädigt werden könnten.

Jetzt bringt Cloudflare diesen Marktplatz zum Leben.

Er heißt „Pay per Crawl“, und Cloudflare startet das „Experiment“ am Dienstag in einer privaten Beta. Website-Besitzer im Experiment können wählen, ob sie AI-Crawler auf individueller Basis erlauben, ihre Seite zu einem festgelegten Preis zu crawlen – eine Mikrozahlung für jedes einzelne „Crawl“. Alternativ können Website-Besitzer wählen, ob sie AI-Crawler kostenlos crawlen lassen oder sie ganz blockieren. Cloudflare behauptet, dass seine Tools es Website-Besitzern ermöglichen, zu sehen, ob Crawler ihre Website für AI-Trainingsdaten, um in AI-Suchergebnissen zu erscheinen oder für andere Zwecke crawlen.

Auf großer Skala ist Cloudflares Marktplatz eine große Idee, die Verlegern ein potenzielles Geschäftsmodell für das AI-Zeitalter bieten könnte – und es platziert Cloudflare auch im Zentrum davon. Die Einführung des Marktplatzes erfolgt zu einem Zeitpunkt, an dem Nachrichtenverlage mit existenziellen Fragen konfrontiert sind, wie sie Leser erreichen können, da der Google-Suchverkehr zurückgeht und AI-Chatbots an Popularität gewinnen.

Es gibt keine klare Antwort darauf, wie Nachrichtenverlage im AI-Zeitalter überleben werden. Einige, wie die New York Times, haben Klagen gegen Technologieunternehmen eingereicht, weil sie ihre AI-Modelle ohne Genehmigung auf Nachrichtenartikel trainiert haben. In der Zwischenzeit haben andere Verleger mehrjährige Verträge abgeschlossen, um ihre Inhalte für das Training von AI-Modellen zu lizenzieren und um sicherzustellen, dass ihre Inhalte in AI-Chatbot-Antworten erscheinen.

Dennoch haben nur große Verleger Lizenzvereinbarungen für AI getroffen, und es ist noch unklar, ob sie bedeutende Einnahmequellen bieten. Cloudflare zielt darauf ab, ein haltbareres System zu schaffen, in dem Verleger die Preise zu ihren eigenen Bedingungen festlegen können.

Leave a Comment

Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert