Cloudflare zmienia model dla botów AI: koniec Pay Per Crawl, wydawcy dostaną zapłatę za cytowania

Cloudflare ogłosił zwrot w polityce wobec botów sztucznej inteligencji: firma rezygnuje z rozliczania crawlerów za każde pobranie strony i przechodzi na model, w którym wydawcy otrzymują zapłatę dopiero wtedy, gdy ich treść realnie pojawi się w odpowiedzi generowanej przez AI. Zmiana, zapowiedziana 1 lipca 2026 roku, zastępuje uruchomiony rok wcześniej mechanizm Pay Per Crawl nowym rozwiązaniem nazwanym Pay Per Use. Dla branży SEO i AIO to sygnał, że wartość treści w erze wyszukiwarek opartych na modelach językowych zaczyna być mierzona nie liczbą pobrań, lecz liczbą cytowań.

Decyzja zapada w momencie, gdy ruch generowany przez roboty AI po raz pierwszy przekroczył połowę całego ruchu HTML w sieci, a relacja między pobieraniem treści a realnym odsyłaniem użytkowników do źródeł stała się rażąco niesymetryczna. Cloudflare, który obsługuje znaczną część światowego ruchu internetowego, próbuje przekształcić tę nierównowagę w działający rynek, w którym publisherzy odzyskują kontrolę nad tym, kto i na jakich zasadach korzysta z ich materiałów.

Kontekst: rok napięcia między wydawcami a botami AI

Ogłoszenie nie pojawia się w próżni. Ostatnie dwanaście miesięcy to okres narastającego konfliktu między wydawcami treści a firmami rozwijającymi modele językowe. Kolejne redakcje, wydawnictwa i serwisy branżowe alarmowały, że ich materiały są masowo pobierane do trenowania modeli oraz do zasilania odpowiedzi asystentów, a w zamian nie dostają ani ruchu, ani wynagrodzenia. Klasyczny kontrakt sieci, w którym wyszukiwarka indeksuje treść, a w zamian odsyła do niej użytkowników, przestał działać w świecie, gdzie odpowiedź powstaje bezpośrednio w oknie czatu.

Cloudflare znalazł się w tym sporze w roli naturalnego pośrednika. Firma widzi ruch na ogromnej części witryn w sieci, a więc dysponuje danymi, których nie ma żaden pojedynczy wydawca ani żadna pojedyncza platforma AI. To pozwala jej nie tylko rozpoznawać i klasyfikować boty, lecz także obserwować, jak zmienia się struktura ruchu w skali całego internetu. Pierwszy model, Pay Per Crawl, był próbą postawienia rogatki. Nowy model to próba zbudowania w tym miejscu pełnoprawnego rynku, w którym płatność jest powiązana z realnym wykorzystaniem treści.

Od Pay Per Crawl do Pay Per Use: co dokładnie się zmienia

Pierwotny model Pay Per Crawl ruszył 1 lipca 2025 roku w wersji prywatnej bety. Jego logika była prosta: gdy crawler AI chciał pobrać stronę, wydawca mógł zażądać opłaty, a serwer zwracał odpowiedź HTTP 402 (Payment Required) z ceną za dostęp. W sierpniu 2025 roku Cloudflare rozszerzył ten mechanizm o możliwość dostosowywania odpowiedzi 402, dając właścicielom witryn większą elastyczność w ustalaniu warunków.

Po roku firma uznała jednak, że rozliczanie za samo pobranie jest ślepą uliczką. Argument jest następujący: crawl to kiepski wskaznik wartości, ponieważ jedna strona może zostać pobrana raz, a potem cytowana w tysiącach generowanych odpowiedzi, albo odwrotnie, może być pobierana wielokrotnie i nigdy nie trafić do żadnej odpowiedzi. Płacenie za pobranie premiuje więc aktywność robota, a nie realne wykorzystanie treści.

Nowy model Pay Per Use odwraca tę logikę. Wydawca dostaje wynagrodzenie w momencie, gdy jego treść faktycznie kształtuje odpowiedź asystenta AI lub pojawia się w wynikach wyszukiwania opartego na modelu językowym. To przejście od rozliczeń za input (pobranie) do rozliczeń za outcome (cytowanie), które znacznie lepiej odzwierciedla to, na czym publisherom naprawdę zależy: na widoczności w odpowiedziach, a nie na samym fakcie, że robot odwiedził serwer.

Liczby, które wymusiły zmianę

Za decyzją stoją twarde dane o skali marnotrawstwa w obecnym modelu crawlowania. Według analiz Cloudflare ponad 50 procent ruchu generowanego przez legalne boty to ponowne pobieranie stron, które nie zmieniły się od poprzedniej wizyty. To czysta strata pasma i mocy obliczeniowej po obu stronach, zarówno dla wydawcy, jak i dla firmy AI.

Jeszcze bardziej wymowne są proporcje między pobraniami a realnym ruchem odsyłanym z powrotem do źródeł. Poniższe zestawienie pokazuje, jak głęboka jest ta nierównowaga.

Relacja 38 000 pobranych stron na jedno odesłanie użytkownika oznacza, że model treningowy jednego z dużych dostawców pobierał treści na masową skalę, oddając wydawcom znikomy ruch zwrotny. W klasycznym układzie wyszukiwarki taka wymiana była opłacalna: Google indeksował stronę, a w zamian kierował na nią kliknięcia. W układzie generatywnym ten kontrakt się załamał, bo odpowiedź powstaje w interfejsie asystenta, a użytkownik często nie klika już w źródło.

Ceramic.ai i You.com: pierwsi partnerzy nowego rynku

Cloudflare nie uruchamia Pay Per Use jako abstrakcyjnej zapowiedzi. Firma wskazała dwóch pierwszych komercyjnych partnerów, którzy wdrażają model rozliczeń opartych na wykorzystaniu treści.

Pierwszym jest Ceramic.ai, kierowany przez Annę Patterson, który stosuje model pay-per-query. Wydawca otrzymuje wynagrodzenie, gdy jego treść pojawia się w wynikach wyszukiwania Ceramic, a platforma dostarcza raportowanie na poziomie zapytań: pokazuje, które zapytania wywołały cytowanie danej strony oraz jaką średnią pozycję zajmowała ona w rankingu. To istotny element, bo daje publisherom coś, czego dotąd w ekosystemie AI brakowało, czyli wgląd w to, za co konkretnie są rozliczani.

Anna Patterson skomentowała partnerstwo słowami: „Aby skalować przyszłość wyszukiwania AI, potrzebujemy partnera o ogromnym zasięgu i wspólnym zobowiązaniu do transparentności”. Ta wypowiedz dobrze streszcza logikę całego przedsięwzięcia: bez zaufanego pośrednika mierzącego cytowania rynek płatności za treść nie ma jak powstać.

Drugim partnerem jest You.com, który pozwala agentom AI kupować dostęp do treści premium na żądanie, bez konieczności podpisywania zobowiązań z góry. Model on-demand oznacza, że asystent płaci za konkretny fragment treści dopiero wtedy, gdy realnie go potrzebuje do udzielenia odpowiedzi. Autorem oficjalnego komunikatu na blogu Cloudflare był Matthew Conroy, który przedstawił zmianę jako odpowiedz na marnowaną moc obliczeniową i koszty pasma po obu stronach.

Twarda data: 15 września 2026 i domyślne blokowanie

Nowy model wynagradzania idzie w parze z zaostrzeniem polityki dostępu. Od 15 września 2026 roku Cloudflare wprowadzi domyślne blokowanie crawlerów typu Training i Agent na stronach wyświetlających reklamy, początkowo dla nowych domen. Roboty wyszukiwania (Search) pozostaną dopuszczone, co pokazuje, że firma traktuje klasyczne indeksowanie inaczej niż zbieranie danych treningowych czy działania agentów.

Kluczowy niuans dotyczy crawlerów wielofunkcyjnych, czyli takich, które łączą wyszukiwanie, trening i działania agentowe w jednym bocie. Ich dostęp będzie zależał od łącznego profilu zachowania, a nie od deklarowanej nazwy. To odpowiedz na praktykę, w której pojedynczy robot pobiera treść pod pretekstem wyszukiwania, a faktycznie zasila nią modele treningowe. Cloudflare sygnalizuje, że domyślna konfiguracja nie będzie już otwarta, lecz zamknięta wobec botów o mieszanym przeznaczeniu na stronach zarabiających na reklamach.

Co to znaczy dla SEO i AIO

Dla specjalistów SEO i AIO ogłoszenie Cloudflare to potwierdzenie trendu, który obserwujemy od kilkunastu miesięcy: cytowanie staje się nową walutą widoczności. Jeśli wynagrodzenie i pomiar wartości treści przesuwają się w stronę pojawiania się w odpowiedziach AI, to optymalizacja pod kątem bycia cytowanym przestaje być ciekawostką, a staje się realnym KPI. Piszemy o tym szerzej w naszym przewodniku o tym, jak być cytowanym przez ChatGPT i inne modele.

Praktyczne konsekwencje są co najmniej trzy. Po pierwsze, raportowanie na poziomie zapytań, jakie zapowiada Ceramic.ai, zaczyna przypominać to, do czego przyzwyczaił nas Google Search Console, tyle że w świecie odpowiedzi generatywnych. Marki będą chciały wiedzieć, przy jakich promptach są przywoływane i na jakiej pozycji. Po drugie, blokowanie botów o mieszanym przeznaczeniu na stronach z reklamami zmienia kalkulację dla wydawców utrzymujących się z reklam: mogą oni odzyskać kontrolę nad tym, czy ich treść zasila darmowo modele, które później konkurują z nimi o uwagę czytelnika.

Po trzecie, cała konstrukcja premiuje treści, które modele faktycznie chcą cytować, a więc materiały konkretne, dobrze ustrukturyzowane, zawierające dane, definicje i jednoznaczne odpowiedzi. To ta sama logika, którą śledziliśmy przy okazji uruchomienia wskaznika Citation Share w Bing Webmaster Tools, gdzie udział w cytowaniach stał się mierzalną metryką obok klasycznej pozycji w wynikach.

Warto też zauważyć, że model oparty na cytowaniach zmienia sposób myślenia o architekturze treści. Skoro liczy się to, czy fragment strony zostanie wykorzystany w odpowiedzi, rośnie znaczenie samodzielnych, zwięzłych bloków informacji, które model może wyodrębnić i przytoczyć bez konieczności rozumienia całego artykułu. To premiuje jasne akapity odpowiadające na jedno pytanie, tabele z danymi, listy kroków oraz definicje, czyli dokładnie te formaty, które od dawna zaleca się w optymalizacji pod AIO. Rynek finansowy zaczyna więc nagradzać strukturę, którą specjaliści rekomendowali głównie z powodów jakościowych.

Reakcje branży

Reakcje na zapowiedz są mieszane, choć dominuje ostrożny optymizm po stronie wydawców. Zwolennicy podkreślają, że model pay-per-citation jest sprawiedliwszy niż rozliczanie za pobranie, bo wiąże wypłatę z realną wartością, jaką treść wnosi do odpowiedzi. Dla dużych domen medialnych oznacza to szansę na strumień przychodów, który częściowo rekompensuje utracony ruch organiczny.

Sceptycy zwracają jednak uwagę na trzy słabe punkty. Pierwszy to pomiar: ustalenie, czy dana odpowiedz AI faktycznie została ukształtowana przez konkretny fragment treści, jest technicznie trudne i wymaga zaufania do pośrednika, który to mierzy. Drugi to skala: przy dwóch partnerach startowych rynek jest dopiero w powijakach, a jego wartość zależy od tego, czy dołączą najwięksi dostawcy modeli. Trzeci to ryzyko fragmentacji, w której każda platforma AI liczy cytowania po swojemu, a wydawca musi żonglować wieloma niespójnymi raportami.

Część komentatorów zwraca też uwagę na aspekt techniczny. Program badawczy, w którym wydawcy dobrowolnie sygnalizują, czy dana strona faktycznie się zmieniła, może realnie ograniczyć marnotrawstwo pasma. Jeśli crawler wie, że treść jest identyczna jak przy poprzedniej wizycie, nie musi jej ponownie pobierać, co odciąża zarówno serwery wydawcy, jak i infrastrukturę firmy AI. W praktyce oznacza to, że relacja wydawca-platforma przestaje być grą o sumie zerowej, w której jedna strona pobiera, a druga próbuje się bronić, a zaczyna przypominać negocjowany protokół wymiany danych.

W tle całej dyskusji wisi rosnąca liczba sporów prawnych o wykorzystanie treści przez systemy AI. Napięcie między wydawcami a platformami dobrze ilustruje głośna sprawa, którą opisywaliśmy przy okazji pozwu CNN przeciwko Perplexity. Model Cloudflare można czytać jako próbę zaproponowania rynkowej alternatywy dla drogi sądowej: zamiast pozywać, wydawcy mieliby po prostu inkasować opłaty za wykorzystanie.

Co dalej

Najbliższe miesiące pokażą, czy Pay Per Use ma szansę stać się standardem, czy pozostanie eksperymentem na obrzeżach ekosystemu. Kluczowe będą trzy punkty. Pierwszy to reakcja największych dostawców modeli: dopóki liderzy rynku asystentów AI nie zaczną płacić za cytowania, model będzie działał tylko z mniejszymi partnerami. Drugi to termin 15 września 2026 roku, po którym domyślne blokowanie botów o mieszanym przeznaczeniu na stronach reklamowych zacznie realnie wpływać na dostępność treści dla robotów. Trzeci to rozwój programu badawczego, w którym wydawcy dobrowolnie dzielą się sygnałami o zmianach treści, aby crawlery mogły pomijać pobieranie stron, które się nie zmieniły.

Dla polskich specjalistów SEO i AIO wniosek jest praktyczny: warto już teraz traktować cytowalność treści jako osobny cel optymalizacji, niezależny od pozycji w klasycznych wynikach. Struktura treści, jednoznaczne odpowiedzi na pytania, dane liczbowe i przejrzyste definicje to elementy, które zwiększają szansę na przywołanie przez model, a w nowym układzie rozliczeń mogą się przełożyć na realne przychody. Zmiana Cloudflare nie rozwiązuje wszystkich problemów relacji wydawca-AI, ale po raz pierwszy proponuje mechanizm, w którym wartość mierzy się tym, co użytkownik faktycznie zobaczył w odpowiedzi, a nie tym, ile razy robot odwiedził serwer.

FAQ