Odkryłem coś dziwnego w logach serwera klienta.
Nieznane mi boty odwiedzały jego sklep dziesiątki razy dziennie. GPTBot, Claude-Web, PerplexityBot.
Sprawdziłem konfigurację. Wszystkie były blokowane.
To był błąd, który kosztował go widoczność w nowej erze wyszukiwania.
Nowi gracze w wyszukiwaniu
Przez lata jedynym botem, o którym musieliśmy myśleć, był Googlebot. Dziś? Jest ich ponad dwadzieścia.
Każda duża firma AI ma swojego crawlera, który przeszukuje internet:
- GPTBot – OpenAI (ChatGPT)
- Claude-Web – Anthropic (Claude)
- PerplexityBot – Perplexity AI
- Amazonbot – Amazon (Alexa, wyszukiwarka)
- Google-Extended – Google (Gemini)
I wiele innych. Te boty zbierają informacje, które potem AI używa do odpowiadania na pytania użytkowników.
Pytanie brzmi: czy Ty je wpuszczasz, czy blokujesz?
Dylemat: blokować czy nie?
Wielu właścicieli stron blokuje boty AI. Boją się, że ich treści zostaną użyte do treningu modeli bez zgody.
Rozumiem tę obawę. Ale jest problem.
Blokowanie botów AI = niewidoczność w AI
Jeśli GPTBot nie może odwiedzić Twojej strony, ChatGPT nie będzie wiedział że istniejesz. Jeśli Claude-Web jest zablokowany, Claude nie poleci Cię swoim użytkownikom.
W erze, gdzie coraz więcej ludzi używa AI do szukania informacji i rekomendacji, to może być kosztowny błąd.
Co tracisz blokując boty AI?
Liczby są bezlitosne.
33% użytkowników w USA używa AI do wyszukiwania informacji przynajmniej raz w tygodniu (dane: Reuters Institute, 2024). W Polsce ten trend rośnie z każdym miesiącem.
Kiedy ktoś pyta ChatGPT "jaki sklep z kawą polecasz w Krakowie?" albo "gdzie kupić meble skandynawskie?" – AI odpowiada na podstawie tego, co wie. A wie tylko to, co może przeczytać.
Jeśli Twoja strona blokuje GPTBot – nie istniejesz w odpowiedziach ChatGPT.
To samo z Perplexity, Claude, Gemini. Każdy z nich ma swojego bota. Każdy z nich buduje bazę wiedzy o firmach i produktach.
Twoja konkurencja, która wpuszcza te boty? Ona jest polecana. Ty nie.
I to nie jest kwestia przyszłości. To dzieje się teraz.
Google AI Overview już pokazuje się w wynikach wyszukiwania. Perplexity ma miliony użytkowników. ChatGPT jest używany częściej niż Bing.
Za rok blokowanie botów AI będzie jak blokowanie Googlebota w 2010 – biznesowe samobójstwo.
Nasze podejście: kontrolowany dostęp
Po miesiącach testów wypracowaliśmy strategię, która daje korzyści bez ryzyka.
Zasada jest prosta: nie blokuj całkowicie, ale kontroluj co widzą.
Zamiast dawać botom AI pełny dostęp do całej strony (albo blokować je całkowicie), kierujemy je do specjalnie przygotowanego miejsca – LLM Feed. Tam mają wszystkie informacje, których potrzebują.
Dzięki temu:
- AI wie kim jesteś i co oferujesz
- Twoje treści produktowe pozostają chronione
- Masz pełną kontrolę nad tym, co AI o Tobie "wie"
Efekty
Po wdrożeniu tej strategii u kilku klientów zauważyliśmy wyraźne zmiany.
Jeden z nich – właściciel sklepu z kawą – powiedział mi:
"Po zmianach zauważyłem, że ChatGPT zaczął mnie polecać. Wcześniej w ogóle o mnie nie wiedział."
To nie przypadek. To efekt świadomej strategii komunikacji z AI.
Typowe błędy
Analizując konfiguracje klientów, widzę ciągle te same problemy:
Całkowita blokada wszystkich botów AI. Rozumiem intencję ochrony treści, ale skutkiem jest niewidoczność. Lepiej dać kontrolowany dostęp.
Brak jakiejkolwiek konfiguracji. Domyślne ustawienia często pozwalają botom na wszystko – albo na nic. Żadna z tych opcji nie jest optymalna.
Niekonsekwentne podejście. Niektórzy blokują jedne boty, a inne wpuszczają, bez jasnej strategii. To chaos.
Co to oznacza dla Twojego biznesu?
Konfiguracja dostępu dla botów AI to jeden z elementów nowej rzeczywistości SEO. Sam w sobie nie da cudów, ale jest częścią większej układanki.
Elementy tej układanki to:
- Odpowiednia konfiguracja techniczna
- LLM Feed z informacjami dla AI
- Strukturalne dane o firmie i produktach
- Strategia komunikacji z nowymi graczami w wyszukiwaniu
Wszystko to musi działać razem.
Potrzebujesz pomocy?
Jeśli nie jesteś pewien jak wygląda Twoja obecna konfiguracja i czy AI w ogóle wie o Twoim sklepie – możemy to sprawdzić.
Sprawdź jak AI widzi Twoją stronę
Zaczynamy od audytu – sprawdzamy konfigurację techniczną, widoczność dla botów AI i potencjał do poprawy.
Zamów bezpłatny audyt
