Jak sprawdzić pokrycie Robots.txt i Sitemap w AmICited

Jeśli roboty AI nie mogą odczytać Twojej witryny, żadne inne optymalizacje nie mają znaczenia. Kontrola Robots.txt i Sitemap potwierdza, że interesujące Cię roboty mają dozwolony dostęp — oraz że Twoje mapy witryny faktycznie kierują je do Twoich treści.

Gdzie to znaleźć

Jest to sekcja Robots.txt i Sitemap w Audyt → Agent Accessibility.

Co to sprawdza

Jak wyjaśniono w sekcji, sprawdza ona, “czy ważne roboty AI i wyszukiwarek mają dozwolony dostęp do witryny, czy mapy witryny są zadeklarowane w robots.txt oraz ile łącznie adresów URL zawierają te mapy witryny.” W skrócie:

• Dostęp robotów — czy główne boty AI i wyszukiwarek mają dozwolony (a nie zabroniony) dostęp w robots.txt?
• Deklaracja mapy witryny — czy mapa witryny jest przywołana w robots.txt, aby roboty mogły ją znaleźć?
• Pokrycie mapy witryny — ile adresów URL łącznie zawierają Twoje mapy witryny.

Jak z tego korzystać

1. Potwierdź, że roboty mają dozwolony dostęp. Jeśli ważny bot AI jest zablokowany, popraw regułę w robots.txt — to najważniejszy problem na tej stronie.
2. Zadeklaruj swoją mapę witryny. Upewnij się, że robots.txt wskazuje na Twoją mapę witryny, aby agenci mogli odkryć wszystkie Twoje strony.
3. Sprawdź liczbę adresów URL. Mapa witryny zawierająca znacznie mniej adresów URL niż opublikowanych stron oznacza, że strony nie są reklamowane robotom.
4. Sprawdź ponownie po edycjach i potwierdź, że kafelki Dostęp robotów oraz Adresy URL w mapie witryny w podsumowaniu gotowości są zdrowe.

Dostęp robotów to podstawa: najpierw dopracuj to, ponieważ wszystko inne zakłada, że boty faktycznie mogą dotrzeć do Twoich treści.