Cel badania
Postanowiliśmy sprawdzić, jak trzy najpopularniejsze modele sztucznej inteligencji interpretują tę samą stronę hotelu wyłącznie na podstawie publicznie dostępnych informacji.
Badanie miało odpowiedzieć na jedno pytanie:
Czy AI rozumie stronę internetową tak, jak jej właściciel chciałby być przedstawiany?
Metodologia
Do badania wykorzystano tę samą stronę hotelu. Każdy model otrzymał identyczny adres URL. Nie stosowano żadnych dodatkowych promptów, nie przekazywano dodatkowego kontekstu. Każdy model odpowiadał wyłącznie na podstawie informacji, które potrafił odczytać ze strony.
Badane modele:
- ChatGPT
- Gemini
- Perplexity
Zakres analizy
Podczas badania ocenialiśmy, czy AI poprawnie rozpoznaje rodzaj obiektu, rozumie lokalizację, potrafi opisać ofertę, wychwytuje najważniejsze przewagi, zachęca użytkownika, pomija ważne informacje, dodaje informacje, których nie ma, oraz jak kompletna jest odpowiedź.
Wyniki
ChatGPT
Mocne strony
- poprawnie rozpoznał typ obiektu
- dobrze opisał lokalizację
- wskazał najważniejsze udogodnienia
Słabsze strony
- pominął unikalny charakter miejsca
- nie zauważył wyróżniających usług
Gemini
Mocne strony
- bardzo dobrze streścił ofertę
- poprawnie wskazał grupę docelową
Słabsze strony
- mniej szczegółów
- część odpowiedzi była zbyt ogólna
Perplexity
Mocne strony
- najpełniejszy opis
- dobrze połączył informacje
- wskazał przewagi konkurencyjne
Słabsze strony
- momentami dopowiadał informacje na podstawie własnych wniosków
Porównanie
Wszystkie trzy modele poprawnie odczytały podstawowe informacje o hotelu. Różnice pojawiły się przy interpretacji stylu marki, emocji i kompletności opisu.
| Kryterium | ChatGPT | Gemini | Perplexity |
|---|---|---|---|
| Lokalizacja | |||
| Oferta | |||
| Udogodnienia | |||
| Styl marki | |||
| Emocje | |||
| Kompletność | 9/10 | 8/10 | 9.5/10 |
Najważniejsze obserwacje
Podczas badania zauważyliśmy, że wszystkie modele poprawnie odczytały podstawowe informacje. Największe różnice pojawiły się przy interpretacji:
- charakteru obiektu
- emocji
- przewag konkurencyjnych
- języka marki
Kluczowa obserwacja
Im lepiej przygotowana struktura treści, tym bardziej kompletne odpowiedzi generowała sztuczna inteligencja.
Wnioski
Badanie pokazuje, że nowoczesna strona internetowa nie powinna być tworzona wyłącznie z myślą o użytkowniku i Google. Coraz większe znaczenie ma również sposób, w jaki treść jest interpretowana przez modele AI.
To właśnie od jakości struktury informacji zależy, czy ChatGPT, Gemini lub Perplexity poprawnie przedstawią Twoją firmę.
Co poprawilibyśmy na tej stronie?
Na podstawie badania przygotowaliśmy listę rekomendacji. Najważniejsze z nich:
- lepsza hierarchia nagłówków
- bardziej jednoznaczne opisy usług
- rozbudowanie sekcji wyróżników
- poprawa semantyki HTML
- uporządkowanie informacji o lokalizacji
- dodanie FAQ
- lepsze dane strukturalne
Podsumowanie
Strona hotelu uzyskała od nas wysoką ocenę przygotowania pod AI Search, ale wyniki pokazują też wyraźne obszary do poprawy. Modele AI coraz częściej występują pośrednio między firmą a jej potencjalnym klientem — warto zadbać o to, aby ta rozmowa przebiegała zgodnie z intencją marki.
Ocena przygotowania strony pod AI Search
9.0 / 10
Strona hotelu jest przygotowana lepiej niż większość, ale wciąż pozostawia pole do poprawy w zakresie stylu marki, emocji i semantyki.