ChatGPT pomenește rar unele branduri chiar și când sursele citate vorbesc despre ele
Graphite, o agenție de growth care vinde servicii de optimizare pentru motoarele de răspuns AI, a publicat pe 16 octombrie o analiză pe întrebări de comparație, de tipul „care e mai bun, X sau Y”. A strâns în august 3.115 perechi brand-întrebare din 57 de întrebări puse în ChatGPT fără cont logat. A măsurat apoi cât de des apare fiecare brand în răspunsuri, separat pentru răspunsurile date cu căutare pe web și pentru cele date fără căutare.
Ce a găsit
Brandurile pe care ChatGPT le numea des fără să caute erau numite des și când căuta. Mai interesant e invers. Graphite a luat brandurile care apăreau substanțial în cel puțin 15% din paginile citate. Dintre acestea, cele numite în mai puțin de un sfert din răspunsurile fără căutare au avut, cu căutarea pornită, o vizibilitate mediană de doar 11%. Altfel spus, faptul că sursele vorbesc despre tine nu garantează că ChatGPT te pune în răspuns. Rezultatul s-a repetat în două verificări separate, una cu 100 de întrebări prin API cu căutarea pornită și oprită, alta cu 200 de întrebări urmărite trei săptămâni.
Analiza mai are câteva cifre utile. Din 22.953 de întrebări de comparație fără niciun brand în text, ChatGPT a generat în fundal aproximativ 957.000 de căutări, iar 59,6% dintre ele conțineau un nume de brand. Modelul adaugă singur branduri pe care le știe deja. Proporția răspunsurilor cu citări a urcat de la 56,6% la începutul lui august la 88,5% la final de septembrie. Graphite estimează că un conținut nou are nevoie de două până la cinci luni ca să ajungă într-un model nou, pentru că atât durează între data-limită a datelor de antrenare și lansare.
Limitele studiului
Search Engine Journal notează lucruri importante. Nu e clar cum au fost separate exact răspunsurile fără căutare, iar studiul nu ține cont de notorietatea brandurilor. Un brand foarte cunoscut apare des peste tot, cu sau fără căutare, deci legătura poate veni pur și simplu din faima lui. O citare nu dovedește nici ea că modelul a căutat ceva. Iar Graphite câștigă din vânzarea exact a acestui tip de serviciu.
Ce credem noi
Chiar și cu limitele astea, concluzia practică ni se pare corectă și o tot vedem la clienți: să apari pe paginile pe care le citează ChatGPT nu e suficient. Dacă modelul nu te „știe” deja, te sare chiar și când sursa îl pune în fața ta. Multe rapoarte de GEO numără doar citările și cât de des apare domeniul tău în surse. Imaginea pe care o dau e incompletă și, de multe ori, prea optimistă.
Pentru un brand din România asta înseamnă că munca de notorietate clasică, de la presă și recenzii la parteneriate și apariții în listele de comparații, contează și pentru AI, nu doar pentru oameni. Doar că efectul vine cu întârziere de câteva luni și e greu de măsurat. Cine se așteaptă ca un articol publicat azi să-l bage mâine în răspunsurile ChatGPT o să fie dezamăgit.
Ce am face concret: când apare un model nou, rulăm același set de întrebări prin API cu căutarea oprită și notăm de câte ori e numit brandul. Asta dă o bază de comparație pentru ce știe modelul singur. Apoi repetăm măsurătoarea cu căutarea pornită, periodic, fiindcă procentul de citări se schimbă de la o lună la alta. Iar la raportare, ne uităm la de câte ori e numit brandul, nu doar la de câte ori e citat site-ul. Sunt două cifre diferite.