Jak zabezpieczyć swoje treści przed AI? Cloudflare blokuje boty AI – Pay per Crawl – nowy sposób monetyzacji?
Cloudflare, technologiczny gigant, którego globalna sieć napędza miliony stron internetowych, przedstawia swoją propozycję na nowe zasady zarabiania na treści w Internecie. Ich nowa usługa może na nowo zdefiniować relacje między twórcami treści a sztuczną inteligencją.
To, że generatywne AI zabiera ruch organiczny jest już faktem. Jednocześnie uderza to w biznes, który dostarcza treści, na których bazować może AI. Czy modele językowe podcinają gałąź, na której siedzą? Najwyraźniej.
Cloudflare uruchamia testy zamkniętej bety „Pay per Crawl” – innowacyjnego rozwiązania, które daje wydawcom kontrolę nad tym, jak boty AI korzystają z ich materiałów. Koniec z darmowym „czytaniem” Twoich treści przez algorytmy. Teraz masz trzy opcje: zablokować dostęp, udostępnić go za darmo lub… zażądać zapłaty 💰.
Chcesz, aby Twoje wartościowe dane zasilały modele AI? Proszę bardzo, ale w zamian za uczciwą zapłatę. To jak tradycyjny „paywall”, ale stworzony specjalnie dla botów. Cloudflare pełni rolę pośrednika i zapewnia bezpieczne transakcje i pełną swobodę w ustalaniu cen za dostęp do treści.
Ekran konfiguracji Pay per Crawl | Źródło: https://blog.cloudflare.com/introducing-pay-per-crawl/
Kto chce blokować AI?
Usługa dedykowana jest portalom informacyjnym i dużym twórcom treści zarabiających na reklamach. W przypadku innych biznesów wykorzystanie ich treści przez boty i szansa na cytowanie w odpowiedzi na zapytania użytkowników jest pożądana. Co tu dużo gadać, nawet my mamy usługę na budowanie widoczności w modelach AI.
Jest to więc usługa dla określonego segmentu rynku, która do tej pory monetyzować swoje treści poprzez ruch organiczny.
„Pay per Crawl” może również stanowić alternatywę dla ścieżki sądowej – zamiast walczyć o prawa w sądzie, wydawcy mogą wyznaczyć granice samodzielnie, oferując dostęp na własnych warunkach. W USA i UE trwają dyskusje o tym, czy scraping treści do trenowania LLM-ów bez zgody wydawcy to naruszenie praw autorskich. Głośno było m.in. o pozwach The New York Times vs. OpenAI i Microsoft.
Jak działa „Pay per Crawl”?
Usługa „Pay per Crawl” integruje się z istniejącą infrastrukturą webową, wykorzystując standardowe kody statusu HTTP i mechanizmy uwierzytelniania. Gdy bot AI próbuje uzyskać dostęp do Twoich treści, system Cloudflare reaguje w następujący sposób:
- Płatność proaktywna: Crawler może wysłać żądanie z zamiarem płatności (za pomocą nagłówków HTTP), a jeśli transakcja zostanie zaakceptowana, otrzyma status HTTP 200 (sukces) i pełny dostęp do treści.
- Płatność reaktywna: Jeśli crawler nie przedstawi intencji płatności, Cloudflare zwróci status HTTP 402 (Payment Required) wraz ze szczegółami dotyczącymi wymaganej opłaty. Bot może wówczas ponowić próbę, dołączając dane płatności.
Cloudflare działa tu jako pośrednik płatności, zajmując się całą stroną techniczną i finansową. Nawet jeśli dany bot AI nie ma jeszcze współpracy rozliczeniowej z Cloudflare, możesz wybrać opcję „naliczania opłat”, która zadziała jako blokada na poziomie sieci, sygnalizując jednocześnie potencjalną przyszłą współpracę. System umożliwia również wyłączenie opłat dla wybranych crawlerów.
Zasada działania Pay per Crawl | Źródło: https://blog.cloudflare.com/introducing-pay-per-crawl/
Przyszłość transakcji z AI
„Pay per Crawl” to dopiero początek. Cloudflare przewiduje, że usługa będzie ewoluować, wspierając dynamiczne ceny, bardziej szczegółowe licencje oraz programowalne negocjacje, otwierając nowe możliwości dla inteligentnych agentów i przyszłości internetu.
Ta inicjatywa to odpowiedź na rosnące zapotrzebowanie wydawców, organizacji prasowych i platform społecznościowych, które od dawna szukały sposobu na monetyzację swoich zasobów w erze AI. Dzięki „Pay per Crawl” to twórcy odzyskują kontrolę, a ich praca zyskuje należną wartość. I o wszystko bez sądowych batalii :)
Chcesz dowiedzieć się więcej o tej przełomowej propozycji od Cloudflare i sprawdzić, jak „Pay per Crawl” może działać na Twoją korzyść? Pełne informacje znajdziesz na ich blogu:
