Instrumente gratuite pentru vizibilitatea în AI
Verificare crawlere AI
Asistenții AI pot recomanda doar ceea ce crawlerele lor au voie să citească. Introduceți domeniul pentru a vedea, pentru fiecare crawler AI, dacă robots.txt îl lasă să intre și care este linia exactă care decide.
Ce testează verificatorul?
Preia o singură dată fișierul robots.txt și aplică regulile standard de potrivire pentru zece crawlere (roboți de indexare) AI, grupate după scop:
- Crawlerele de căutare AI (OAI-SearchBot, PerplexityBot, Claude-SearchBot) decid dacă asistenții vă pot cita paginile în răspunsuri.
- Roboții declanșați de utilizator (ChatGPT-User) vizitează o pagină atunci când o persoană întreabă despre ea.
- Crawlerele de antrenare (GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot, Bytespider) decid dacă conținutul dumneavoastră poate fi folosit la antrenarea modelelor. Blocarea lor este o alegere legitimă.
Cum citiți rezultatul?
Fiecare rând spune dacă accesul este permis sau blocat, ce grup de reguli s-a aplicat (cel propriu crawlerului sau grupul general *) și linia exactă care a decis. Dacă un crawler de căutare este blocat, copiați robots.txt corectat de sub tabel: acesta permite accesul crawlerelor alese și păstrează interzise căile dumneavoastră private.
Ce nu vă poate spune verificatorul?
robots.txt exprimă politica dumneavoastră, dar nu este o încuietoare. Un firewall sau un serviciu de protecție împotriva boturilor poate bloca un crawler chiar dacă robots.txt îl permite, iar unii roboți declanșați de utilizator pot să nu respecte deloc robots.txt. Dacă verificatorul arată accesul ca permis, iar asistenții tot nu vă pot citi site-ul, verificați aceste setări. Ghidul crawlerelor AI enumeră ce documentează fiecare furnizor.
Aflați dacă ChatGPT chiar vă recomandă
Aceste instrumente verifică dacă AI vă poate citi site-ul. Verificarea gratuită a vizibilității în AI pune ChatGPT și Perplexity întrebările clienților dumneavoastră și arată pe cine recomandă.
Rulați verificarea gratuită →Cum îl folosiți
- Introduceți domeniul site-ului dumneavoastră.
- Citiți verdictul pentru fiecare crawler AI și linia din robots.txt care îl decide.
- Dacă crawlerele de căutare sunt blocate, copiați robots.txt corectat și încărcați-l în rădăcina site-ului.
Întrebări frecvente
Care este diferența dintre GPTBot și OAI-SearchBot?
OAI-SearchBot preia pagini pentru răspunsurile de căutare din ChatGPT, așa că blocarea lui vă scoate din aceste răspunsuri. GPTBot colectează date pentru antrenarea modelelor OpenAI; blocarea lui nu vă elimină din căutarea ChatGPT.
Ar trebui să blochez crawlerele AI de antrenare?
Este alegerea dumneavoastră. Blocarea crawlerelor de antrenare (GPTBot, ClaudeBot, Google-Extended, CCBot) vă ține conținutul în afara antrenării viitoarelor modele, dar nu blocați crawlerele de căutare dacă doriți ca asistenții AI să vă recomande.
robots.txt-ul meu permite tot. De ce nu mă menționează ChatGPT?
Accesul este doar primul pas. Asistenții AI recomandă afaceri pe care le găsesc descrise clar și citate de alte site-uri. Rulați verificarea gratuită a vizibilității în AI pentru a vedea pe cine recomandă în schimb.