Remedierea robots.txt chiar funcționează. Iată exact ce să verifici.
Blocaje frecvente de verificat:
# Acestea blochează crawlerii AI:
User-agent: GPTBot
Disallow: /
User-agent: PerplexityBot
Disallow: /
Ce să adaugi în schimb:
User-agent: GPTBot
Allow: /
User-agent: PerplexityBot
Allow: /
User-agent: ChatGPT-User
Allow: /
User-agent: ClaudeBot
Allow: /
Unde să verifici:
yoursite.com/robots.txt
Atenție:
Multe pluginuri de securitate WordPress blochează implicit acești crawleri. Verifică și setările pluginului.
Rezultatele noastre:
- Înainte de remediere: 0 citări Perplexity
- După remediere: 12 citări în 3 săptămâni
- Nicio altă modificare făcută
Este cel mai bun ROI pentru 15 minute investite vreodată.