SEO

Blokowanie botów AI: decyzja, którą większość firm podjęła przez przypadek

Cloudflare i hostingi domyślnie blokują crawlery AI, często bez wiedzy zespołu marketingowego. Do tego OpenAI ma własny mechanizm „Aura”, który decyduje o dostępie do strony i ignoruje robots.txt. Skutek: firma wypada z odpowiedzi AI i z reklam, a dowiaduje się o tym po fakcie.

Sygnał w danych

Niezależne źródła o tym temacie: 0 w ostatnim tygodniu, 4 w 30 dni, 6 w 90 dni. Temat obserwujemy od 17.11.2025; łącznie 13 twierdzeń w naszej bazie.

tydz. 332

tydz. 340

tydz. 350

tydz. 360

tydz. 371

tydz. 382

tydz. 390

tydz. 400

tydz. 410

tydz. 421

tydz. 433

tydz. 440

Liczba niezależnych źródeł w kolejnych tygodniach (ostatnie 12 tygodni).

Co się stało

W ciągu ostatnich dwóch tygodni cztery niezależne źródła opisały ten sam mechanizm z różnych perspektyw: blokada botów AI przestała być świadomą decyzją strategiczną, a stała się ustawieniem domyślnym, o którym nikt w firmie nie pamięta.

Cloudflare często domyślnie blokuje crawlery AI - zdarza się, że ta opcja jest włączona bez wiedzy zespołu marketingowego. W jednym z opisanych przypadków strona na Shopify blokowała boty AI, choć nikt nie podjął takiej decyzji. Niezależnie od tego OpenAI potwierdziło istnienie centralnego mechanizmu kontroli bezpieczeństwa „Aura”, który decyduje, czy narzędzia przeglądarkowe OpenAI mogą połączyć się z daną stroną - i ignoruje przy tym robots.txt oraz ustawienia użytkownika.

Dwa różne mechanizmy, jeden efekt

Warto je rozróżnić, bo są nagminnie mylone. Robots.txt to deklaracja po stronie witryny: „nie chcę, żebyś tu wchodził”. Blokada Cloudflare to decyzja po stronie infrastruktury: ruch w ogóle nie dociera do serwera. Aura to trzecia warstwa - decyzja dostawcy modelu o tym, czy w ogóle dopuścić witrynę do swojego narzędzia.

Efekt jest wspólny: strona znika z odpowiedzi AI. Różnica polega na tym, kto może to odkręcić. Plik robots.txt webmaster zmieni w minutę, a zmiana ustawień Cloudflare wymaga dostępu do panelu infrastruktury - i często nie ma go ta sama osoba, która odpowiada za SEO.

Znany jest też skutek uboczny dla kampanii płatnych: strona blokująca boty OpenAI nie może wyświetlać reklam w tym kanale. Blokada ustawiona po to, „żeby nam treści nie kradli”, odcina więc jednocześnie widoczność w AI - zarówno organiczną, jak i płatną.

Gdzie jest realny spór

Nie jest tak, że blokowanie zawsze jest błędem. Argument wydawców jest poważny: jeśli unikalny content jest jedynym aktywem, bezwarunkowe oddawanie go modelom oznacza oddawanie przewagi. W tym sporze pojawiają się dwa sensowne stanowiska.

Pierwsze: blokowanie botów AI przez duże media z unikalnym contentem jest błędem, bo modele będą cytować konkurencję - to strata widoczności przy zerowym zysku. Drugie: zamiast blokować, lepiej ukryć unikalny content za paywallem i sprzedawać go jako płatny produkt. Blokada staje się wtedy decyzją o modelu biznesowym, a nie ustawieniem technicznym.

Pamiętaj też o pułapce z drugiej strony: blokowanie botów AI w Cloudflare potrafi nieumyślnie zahaczyć o indeksowanie przez Googlebota i Bingbota. Wtedy koszt nie ogranicza się do AI - znika również widoczność w klasycznej wyszukiwarce.

Co sprawdzić - w tej kolejności

Najpierw stan faktyczny, nie strategia: czy robots.txt wymienia boty AI i z jaką dyrektywą. Potem - czy CDN albo hosting nie blokuje ich niezależnie od robots.txt, bo tam decyzja mogła zapaść bez udziału zespołu odpowiedzialnego za widoczność. Na końcu - czy któraś z blokad nie dotyka Googlebota albo Bingbota.

Dopiero wtedy warto rozmawiać o tym, czy blokować świadomie. Dla większości firm, które żyją z widoczności, odpowiedź brzmi: nie blokować, tylko pilnować, żeby marka była poprawnie opisana w odpowiedziach. Blokada ma sens tam, gdzie content jest produktem sprzedawanym za paywallem - i tam powinna być świadomą decyzją, a nie domyślnym ustawieniem.

Nasz wniosek

Blokowanie botów AI to dziś najczęściej ustawienie domyślne, a nie strategia. Cztery niezależne źródła w ciągu dwóch tygodni pokazują ten sam wzorzec: Cloudflare blokuje crawlery AI bez wiedzy zespołu marketingowego, OpenAI ma własny mechanizm decydujący o dostępie do strony, a skutkiem jest wypadnięcie z odpowiedzi AI i z reklam. Dla firm żyjących z widoczności sensowna kolejność to najpierw audyt stanu faktycznego, potem decyzja - a blokada ma uzasadnienie biznesowe tylko tam, gdzie content jest produktem.

Pewność: średnia - mechanizmy są dobrze udokumentowane, ale skala zjawiska w polskich firmach nie została zmierzona. Zmienimy zdanie, jeśli: pomiary pokażą, że blokada botów AI nie wpływa na widoczność marki w odpowiedziach, albo Google i OpenAI zaczną respektować robots.txt w sposób weryfikowalny.