Cum măsurăm, pe scurt și onest

Întrebăm prin API, nu prin aplicația ChatGPT

Punem întrebările prin interfețele de programare (API) ale OpenAI, Google și Perplexity, cu căutarea pe web activată acolo unde există. Așa putem repeta aceeași întrebare de mai multe ori, la costuri mici, și putem păstra răspunsurile ca dovadă.

Limita: răspunsurile din API nu sunt identice cu ce vede cineva în aplicația ChatGPT sau Gemini. Aplicațiile țin cont de istoricul utilizatorului, de locație și de setări pe care nu le vedem. Spunem asta din prima zi și calibrăm manual (mai jos).

Prezență cu interval, nu „locul 1”

Asistenții AI nu au un clasament fix. La întrebări aproape identice dau liste diferite de firme: în măsurătoarea noastră pilot, listele seamănă foarte puțin între întrebări apropiate, iar firma cea mai recomandată apare, în medie, în 4 din 7 răspunsuri.

De aceea măsurăm prezența: în ce procent din răspunsuri apare firma ta. Lângă procent dăm intervalul de încredere de 95% (metoda Wilson). „Apari în 12% din răspunsuri, între 6% și 21%” înseamnă că valoarea reală e, foarte probabil, în acea plajă. Cu cât sunt mai multe răspunsuri, cu atât intervalul e mai strâns.

O schimbare de la o lună la alta mai mică decât intervalul poate fi zgomot. O marcăm ca atare, nu o vindem ca progres.

De unde vin întrebările

Fiecare întrebare din raport are sursa ei, afișată lângă ea:

• din căutările Google: sugestiile pe care Google le arată când cineva scrie, de exemplu, „service auto iasi deschis sambata”;
• din volumul de căutări Google: căutări cu volum lunar măsurat; volumul dă ponderea întrebării în scor;
• din catalogul nostru pentru nișă: tipuri de întrebări care apar în toate orașele (recomandare, preț, urgență, zonă);
• adăugată de tine: întrebările pe care le știi de la clienții tăi.

Transformăm căutările în întrebări firești, în română, și le verificăm de mână. Catalogul unei nișe dintr-un oraș e folosit pentru toate firmele din acea nișă și acel oraș, ca scorurile să fie comparabile.

Ce numărăm

• dacă firma ta apare în răspuns (după nume, variante de nume și domeniu);
• ce alte firme apar și cât de des;
• ce site-uri citează motorul (directoare, platforme de servicii, presă, site-uri de firmă).

Persoanele fizice, PFA-urile și cabinetele individuale nu apar pe nume în paginile publice și nici în testul gratuit. Le înlocuim cu „cabinet individual (nume ascuns)”.

Calibrare manuală lunară

O dată pe lună, un om pune o parte din întrebări direct în aplicațiile ChatGPT, Gemini și Perplexity, dintr-un cont curat, și compară cu ce a măsurat API-ul. Dacă diferența e mare pentru o nișă, o spunem în raport.

Ce NU promitem

• Nu promitem locul 1, nici un anumit procent. Nimeni nu poate controla ce răspunde un model AI.
• Nu promitem un număr de clienți noi. Îți arătăm scorul înainte și după, pe aceleași întrebări.
• Nu publicăm nimic în site-ul tău fără aprobarea ta.
• Nu scriem recenzii false și nu inventăm date despre firma ta. Textele propuse pornesc doar de la informații reale.

Ce garantăm este procesul: dacă în 60 de zile nu livrăm reparațiile promise pentru planul tău, îți dăm banii înapoi. Vezi prețurile.