Un site care apare pe prima pagină în Google poate lipsi complet din răspunsurile ChatGPT, iar motivul nu ține neapărat de calitatea conținutului. De multe ori problema e tehnică și trece neobservată: sistemele de securitate ale site-ului pot respinge roboții AI chiar și atunci când proprietarul crede că le-a dat acces. Google citește în principal permisiunile declarate de site, care sunt aproape mereu acordate. Crawlerele AI trebuie să treacă și de un filtru suplimentar, construit inițial împotriva atacurilor și a traficului automat nedorit. Astfel, ce scrie în setările site-ului și ce se întâmplă în realitate pot fi lucruri diferite, iar diferența se vede doar dacă verifici separat fiecare crawler AI (businesstechnavigator.com, iulie 2026).
Contează mult și ce robot blochezi. OpenAI folosește, printre altele, doi crawleri cu roluri distincte. GPTBot colectează conținut care poate fi folosit la antrenarea și îmbunătățirea modelelor. OAI-SearchBot decide dacă paginile pot apărea în rezultatele și răspunsurile generate de funcțiile de căutare ale ChatGPT. Dacă blochezi primul, brandul tău nu dispare automat din ChatGPT. Dacă îl blochezi pe al doilea, paginile tale pot să nu mai fie accesate și citate direct. Chiar și atunci, brandul poate fi menționat în continuare pe baza altor surse accesibile, așa că dispariția nu e totală. Pierzi însă controlul asupra felului în care ești prezentat.
Cifrele arată că mulți administratori de site-uri fac deja această distincție, cel puțin pe hârtie. O analiză făcută de Chris Humphrey în iunie 2026 a evaluat 7.870 de fișiere robots.txt. Aproximativ 17,6% dintre ele blocau GPTBot și doar 6,6% blocau OAI-SearchBot. Pe scurt, accesul pentru antrenare e restricționat mai des decât cel pentru căutare și citare. Nu înseamnă însă că fiecare companie a ales asta în mod conștient: reguli implicite, configurări vechi sau simpla necunoaștere a rolului fiecărui crawler pot duce la același rezultat. Ahrefs a analizat aproape 461 de milioane de fișiere robots.txt, inclusiv pe subdomenii, și a găsit o rată de blocare a GPTBot de 7,3%. Rata e mai mică atunci când se măsoară doar domeniile principale. Datele Cloudflare Radar pentru primul trimestru din 2026 surprind cel mai bine cât de împărțit e internetul: GPTBot este în același timp cel mai des blocat crawler AI prin reguli DISALLOW și cel mai des permis explicit prin reguli ALLOW.
Contextul explică de ce subiectul a devenit urgent. În primii ani de după lansarea ChatGPT, multe publicații și companii au blocat din reflex roboții AI, de teamă că le va fi preluat conținutul fără compensație. Între timp, o parte tot mai mare din căutări începe direct într-un asistent AI. O decizie luată defensiv acum doi-trei ani poate costa azi vizibilitate. În plus, soluțiile de protecție anti-bot au devenit mai agresive cu traficul automat, iar un site poate ajunge să blocheze exact roboții care i-ar aduce clienți, fără ca echipa de marketing să știe.
Departamentul de digital marketing al United Media Services tratează vizibilitatea în căutarea AI ca parte a strategiei GEO (generative engine optimization), alături de SEO, analiza datelor și automatizare. Astfel, rezultatele obținute cu conținutul pot fi comparate cu obiectivele reale de vizibilitate ale fiecărui client. Premisa e simplă: o poziție bună în Google nu garantează aceeași prezență în ChatGPT sau în alte motoare generative, pentru că cele două funcționează pe mecanisme tehnice diferite.
Un brand poate lipsi din răspunsurile AI din mai multe motive, de la relevanță și autoritate insuficiente până la blocaje tehnice. Permisiunile declarate în robots.txt sunt necesare, dar nu ajung, dacă firewall-ul sau sistemul anti-bot oprește separat tocmai roboții care ar aduce brandul în aceste răspunsuri. De aceea, înainte de a cheltui bani pe conținut nou pentru vizibilitate în AI, primul pas este să verifici dacă acești roboți pot ajunge efectiv pe site.
Sursă text și foto: G4Media — articolul original