ChatGPTs dolda styrning avgör vilka företag som citeras

ChatGPT kan ge olika källor för samma fråga ställd två gånger, och ny forskning visar varför: verktyget skickar i det tysta frågor genom flera olika sökpipelines i bakgrunden, och vilken som körs avgör vilka sidor som hämtas och kan citeras. För företag betyder det att ett citat kan dyka upp eller försvinna mellan två identiska prompter utan att innehållet har ändrats, och AI-synlighetsverktyg som mäter en fråga en enda gång mäter i lika hög grad denna styrning som de mäter er.

Vad som hände

Två oberoende forskare, som arbetade separat, upptäckte att ChatGPTs webbsökning bygger på minst fyra sökpipelines i bakgrunden, internt kallade Labrador, Bright, Oxylabs och SERP. SEO-forskaren Chris Green körde det större testet: 1 000 prompter, var och en upprepad upp till tio gånger, totalt 9 946 slutförda körningar. Labrador stod för 88,1 % av de primära sökkällorna, Bright för 9,9 %, Oxylabs för 1,7 % och SERP för 0,3 %.

Instabiliteten är själva fyndet. Green rapporterar att 88,4 % av prompterna behöll samma primära källa vid varje upprepning, men 11,6 % bytte källa. När källan bytte föll överlappet mellan de URL:er som ChatGPT hämtade med ~45 %, och överlappet mellan domäner föll med ~42 %. Ungefär var nionde prompt ger en väsentligt annan uppsättning citerbara sidor beroende på vilken pipeline som råkar köras.

Oberoende av detta granskade forskaren Suganthan Mohanadasan rå nätverkstrafik från ett inloggat ChatGPT-konto och identifierade samma fyra pipeline-namn, där olika pipelines gynnade olika typer av källor. Han pekade också på en klyfta mellan vad ChatGPT hämtar och vad det ger credit för: vissa källor hämtades betydligt oftare än de någonsin citerades.

Varför det är viktigt

Det här gör AI-synlighet delvis till ett mätproblem. Om samma prompt kan lyfta fram eller tappa bort ert företag enbart därför att ChatGPT bytte sökpipeline mellan körningar, säger en enstaka kontroll väldigt lite. Ett företag kan se synligt ut på måndagen och osynligt ut på tisdagen utan att innehållet har ändrats någonstans, och ett verktyg som frågar en gång per sökord kommer att rapportera detta brus som en trend.

Det ökar också klyftan mellan att hämtas och att citeras. Mohanadasan hittade källor som ChatGPT hämtade flitigt men sällan gav credit för, vilket betyder att det är nödvändigt men inte tillräckligt att finnas bland det som hämtas. Som han uttryckte det kan ett företag nämnas utan att citeras, och citeras utan att nämnas.

Vad detta betyder för företag med flera platser

För ett centralt team som följer AI-synlighet över hundratals platser är det praktiska svaret att mäta som en statistiker, inte som en stickprovskontrollant. Testa varje viktig sökfras flera gånger och läs av fördelningen, inte ett enda resultat, så att ett pipelinebyte inte tolkas som en vinst eller en förlust. Där telemetrin tillåter det, notera vilken sökkälla som gav varje svar, precis som Green rekommenderar, så att förändringar i siffrorna kan spåras till styrningen i bakgrunden i stället för att misstas för en förändring i ranking.

Innehållsstrategin behöver inte ändras, och det är den lugnande delen. Sättet att citeras av alla pipelines är samma förstapartsdisciplin som redan styr ranking i AI-sökresultat: konsekventa företagsuppgifter på alla plattformar, tydlig strukturerad data och platssidor som besvarar frågor direkt. Följ hur ert företag och era platser faktiskt syns i AI-svar med ett verktyg som är byggt för det, till exempel Places AI, och behandla varje enskild avläsning som ett stickprov, inte som sanningen.

“Sökkälla borde bli en till dimension som registreras i AI-synlighetsstudier, varhelst telemetrin gör det möjligt.”

Chris Green, ChatGPT-sökforskning

Slutsatsen

ChatGPTs citat är mindre stabila än en enstaka kontroll ger sken av, och en del av den rörelse företag ser beror på styrningen i bakgrunden, inte på deras egna resultat. De företag som tolkar AI-synlighet rätt är de som mäter upprepade gånger och kontrollerar sin förstapartsdata, så att de syns oavsett vilken pipeline som körs.