Cloudflare blokuje boty AI. Co to oznacza dla Twojego e-commerce?
Cloudflare wprowadza nowe zasady, które zablokują crawlery AI wykorzystujące dane bez zgody i zapłaty. Wyjaśniamy, co ta zmiana oznacza dla widoczności Twojego sklepu i jak przygotować się na nową erę agentic commerce.
Cloudflare, jeden z największych operatorów sieci dostarczania treści (CDN), rzucił rękawicę branży AI. Od 15 września 2026 roku domyślnie zablokuje crawlery, które jednocześnie indeksują strony dla wyszukiwarek i zbierają dane do trenowania modeli językowych. To fundamentalna zmiana, która kończy erę darmowego dostępu do treści i danych produktowych dla gigantów technologicznych. Dla e-commerce to sygnał, że czas na nowe, świadome zarządzanie interakcjami z botami.
Koniec darmowego lunchu dla AI
Nowa polityka Cloudflare jest prosta i radykalna. Firma wprowadza rozróżnienie między crawlerami używanymi do klasycznego wyszukiwania (jak Google Search) a tymi, które służą do trenowania AI i zasilania usług typu agentic commerce. Jeśli crawler pełni obie funkcje naraz (tzw. „mixed-use” crawler), jego dostęp do stron chronionych przez Cloudflare zostanie domyślnie zablokowany.
Zmiana dotyczy:
- Nowych klientów Cloudflare.
- Nowych witryn dodawanych przez obecnych klientów.
- Wszystkich użytkowników planu darmowego.
To potężny ruch, biorąc pod uwagę skalę działania Cloudflare. Właściciele sklepów internetowych od dawna zmagają się z dylematem: chcą być widoczni w wyszukiwarkach, ale nie chcą, aby ich starannie przygotowane opisy produktów, zdjęcia i dane o cenach były bezpłatnie wykorzystywane do budowy konkurencyjnych narzędzi AI. Decyzja Cloudflare daje im realne narzędzie do ochrony swojej własności intelektualnej.
„Teraz, gdy większość ruchu w Internecie nie pochodzi od ludzi, musimy działać dalej i szybciej, aby mógł powstać zrównoważony ekosystem” – powiedział Matthew Prince, współzałożyciel i CEO Cloudflare.
Jego słowa potwierdzają, że przekroczyliśmy punkt krytyczny. Ruch generowany przez boty przewyższył ruch ludzki, co wymusza stworzenie nowych, bardziej sprawiedliwych zasad gry.
Google na celowniku
Chociaż Cloudflare nie wymienia nikogo z nazwy, głównym adresatem tej polityki jest Google. Gigant z Mountain View od dawna stosuje strategię, która utrudnia rozdzielenie indeksowania na potrzeby wyszukiwarki od zbierania danych dla AI. Główny bot, Googlebot, jest używany zarówno do indeksowania pod Google Search, jak i do zasilania funkcji opartych na AI, takich jak AI Overviews.
Google co prawda oferuje bota Google-Extended, który pozwala właścicielom witryn zrezygnować z wykorzystywania ich treści do trenowania modeli takich jak Gemini. Jednak rezygnacja z Googlebot oznacza spadek widoczności w kluczowej wyszukiwarce. To szantaż, na który mało który e-commerce może sobie pozwolić. Cloudflare stawia sprawę jasno: albo rozdzielicie swoje boty i będziecie transparentni, albo zostaniecie zablokowani.
Od „Pay Per Crawl” do „Pay Per Use”
Blokowanie to tylko jedna strona medalu. Cloudflare rozwija jednocześnie narzędzia, które mają umożliwić monetyzację danych na nowych zasadach. Model „Pay Per Crawl” (zapłać za scrapowanie) ewoluuje w kierunku „Pay Per Use” (zapłać za użycie).
Na czym polega różnica? W nowym modelu wydawca (czyli np. Twój sklep) otrzymuje wynagrodzenie nie za sam fakt pobrania danych, ale za moment, w którym jego treść generuje wartość dla usługi AI. Przykładowo, gdy Twój produkt pojawi się w odpowiedzi wygenerowanej przez agenta AI lub gdy agent wykorzysta Twoje dane (np. o dostępności SKU) do zrealizowania zakupu dla użytkownika.
To rozwiązuje dwa problemy jednocześnie:
- Monetyzacja: Tworzysz nowe źródło przychodu, pobierając opłaty za komercyjne wykorzystanie Twoich danych.
- Wydajność: Ograniczasz marnotrawstwo zasobów. Analizy Cloudflare pokazują, że ponad 50% ruchu generowanego przez crawlery AI to ponowne pobieranie niezmienionych stron. Nowy model motywuje do efektywniejszego korzystania z danych.
Cloudflare już teraz współpracuje z firmami takimi jak Ceramic.ai i You.com, aby wdrożyć ten model w praktyce. To początek nowego rynku, na którym dane produktowe stają się towarem, a nie darmowym zasobem.
Co dalej?
Decyzja Cloudflare to nie odosobniony incydent, ale symptom szerszego trendu. Era bezrefleksyjnego scrapingu dobiega końca. Zastępuje ją świat, w którym interakcje między sklepami a systemami AI będą oparte na jasnych, transakcyjnych zasadach i ustandaryzowanych protokołach API.
Zamiast czekać na kolejne blokady i spory o prawa do danych, możesz już dziś przygotować swój e-commerce na tę nową rzeczywistość. Universal Commerce Protocol (UCP) to otwarty standard, który pozwala Twojemu sklepowi komunikować się z agentami AI w sposób strukturalny i kontrolowany. Zamiast pozwalać botom na chaotyczne przeszukiwanie strony, udostępniasz im dedykowany endpoint ucp.json, w którym precyzyjnie definiujesz, jakie produkty oferujesz, jakie akcje są dostępne i na jakich zasadach. To proaktywne podejście do rewolucji agentic commerce.