Decyzja o całkowitym zablokowaniu botów i scraperów należących do OpenAI na poziomie konfiguracji serwera webowego budzi obecnie ogromne kontrowersje wśród wydawców internetowych oraz specjalistów do spraw marketingu cyfrowego. Z jednej strony rosnąca świadomość ochrony własności intelektualnej oraz kosztów transferu danych wymusza zdecydowane kroki w celu zatrzymania nieautoryzowanego trenowania modeli językowych na unikalnych treściach redakcyjnych. Z drugiej strony, algorytmy sztucznej inteligencji stały się potężnym źródłem ruchu polecającego oraz kluczowym elementem budowania widoczności marki w ekosystemie nowoczesnego wyszukiwania. Wprowadzenie restrykcyjnych reguł blokujących w pliku robots.txt oraz na poziomie zapory sieciowej WAF miało na celu sprawdzenie, czy odcięcie dostępu gigantowi technologicznemu wpłynie negatywnie na pozycję serwisu w alternatywnych silnikach odpowiedzi, takich jak Perplexity czy SearchGPT. Przeprowadzony przez dziewięćdziesiąt dni eksperyment na średniej wielkości portalu branżowym dostarczył twardych danych ilościowych, które rzucają zupełnie nowe światło na relacje między wydawcami treści a systemami sztucznej inteligencji. Analiza zgromadzonych logów serwerowych oraz statystyk z Google Analytics 4 pozwoliła na precyzyjne określenie skutków biznesowych takiej izolacji technicznej.

Architektura nowoczesnych modeli generatywnych opiera się na ciągłym pozyskiwaniu świeżych informacji bezpośrednio z sieci za pomocą dedykowanych crawlerów, które stale indeksują zasoby internetowe w poszukiwaniu aktualnych odpowiedzi na zapytania użytkowników. Zablokowanie ruchu przychodzącego od OpenAI teoretycznie powinno wyeliminować witrynę z bazy wiedzy wykorzystywanej przez ChatGPT, co mogłoby sugerować spadek cytowań również w konkurencyjnych narzędziach opartych na podobnych mechanizmach agregacji danych. Jednak systemy takie jak Perplexity czy Gemini korzystają z własnych, niezależnych sieci botów skanujących, które w trakcie trwania opisywanego eksperymentu działały bez żadnych dodatkowych zakłóceń ze strony administratorów serwera. Kluczowe pytanie badawcze dotyczyło tego, czy algorytmy OpenAI (https://openai.com/pl-PL/index/learning-a-hierarchy/) dzielą się swoimi bazami danych z innymi podmiotami oraz czy całkowity bojkot crawlerów jednej firmy powoduje efekt domina w postaci spadku widoczności całego serwisu w ekosystemie AI. Wyniki zebrane po trzech miesiącach ciągłego monitorowania ruchu organicznego oraz wzmianek w podsumowaniach generatywnych zaskoczyły zespół analityczny, wskazując na dużą autonomię poszczególnych silników wyszukiwania opartego na sztucznej inteligencji.

Wpływ blokady na widoczność i cytowania w systemie Perplexity

Monitorowanie liczby wzmianek oraz bezpośrednich cytowań w systemie Perplexity przez okres dziewięćdziesięciu dni od momentu wdrożenia blokady wykazało zaskakującą stabilność wskaźników widoczności organicznej. Mimo całkowitego odcięcia dostępu dla botów OpenAI, algorytmy Perplexity nadal indeksowały nowe artykuły za pośrednictwem własnego mechanizmu PerplexityBot oraz ogólnodostępnych baz indeksujących, co pozwalało na regularne umieszczanie linków źródłowych w generowanych odpowiedziach. Liczba cytowań nie tylko nie spadła, ale w niektórych niszowych kategoriach tematycznych zanotowała delikatny wzrost, co wynikało z faktu, że konkurencyjne serwisy również zaczęły blokować scrapery, zmniejszając ogólną pulę dostępnych w sieci informacji. Pokazuje to wyraźnie, że poszczególne platformy AI budują własne indeksy i nie polegają wyłącznie na wspólnych zasobach danych treningowych, dzięki czemu selektywna blokada jednego dostawcy nie oznacza natychmiastowego wykluczenia z całego rynku wyszukiwania generatywnego.

Szczegółowa analiza statystyk pozyskanych z narzędzia Google Analytics 4 oraz zewnętrznych systemów monitorowania pozycji w wyszukiwarkach pozwoliła na wyciągnięcie kilku kluczowych wniosków dotyczących realnego zachowania użytkowników oraz stabilności ruchu:

• Ruch referral generowany bezpośrednio przez platformę Perplexity utrzymał się na stabilnym poziomie z minimalną tendencją wzrostową w skali miesiąca.
• Całkowite zablokowanie scraperów OpenAI doprowadziło do natychmiastowego spadku obciążenia zasobów sprzętowych serwera o około dwadzieścia procent.
• Wskaźnik odrzuceń dla sesji pochodzących z systemów sztucznej inteligencji był znacznie niższy niż w przypadku tradycyjnych wyszukiwarek tekstowych.
• Widoczność domeny w tradycyjnych wynikach organicznych Google nie uległa żadnym negatywnym wahaniom technologicznym wynikającym z blokady botów.
• Liczba zapytań o markę bezpośrednio w wyszukiwarce wzrosła, co świadczy o rosnącej świadomości użytkowników korzystających z odpowiedzi AI.

Podsumowanie eksperymentu i rekomendacje dla administratorów serwerów

Przeprowadzony eksperyment udowadnia, że wydawcy internetowi posiadają znacznie większą kontrolę nad swoimi zasobami w erze sztucznej inteligencji, niż wskazują na to alarmistyczne opinie w branży technologicznej. Odcięcie najbardziej agresywnych skanerów obniża koszty utrzymania infrastruktury bez drastycznego karania serwisu spadkiem cytowań w konkurencyjnych narzędziach takich jak Perplexity. Kluczem do sukcesu pozostaje jednak precyzyjne targetowanie reguł blokujących, aby nie odciąć przypadkowo robotów indeksujących tradycyjne wyszukiwarki, które wciąż generują większość wartościowego ruchu komercyjnego. Dalsza obserwacja rynku pokaże, w jaki sposób zmieniać będą się modele rozliczeń i polityka dostępu do treści w świecie zdominowanym przez algorytmy generatywne.