arXiv:2610.19608 · oktoober 2026
Kas tänane nähtavus püsib ka järgmisel kuul?
Eelregistreeritud test kontrollis prognoose 20,3 päeva hiljem, kasutades üht Gemini versiooni, kahtteist brändi ja kolme keelt. Hiljutine mainimiste ajalugu küsimuste kaupa jäi selles testis kasulikuks.
Kasuta praktikasHoia ajalugu iga küsimuse ja mudeliversiooni kohta. Võrdle järgmist mõõtmist selle lähtetasemega.
Töö pealkiri ja versioonid
Twenty Days Later: A Pre-Registered Test of History-Based Forecasts of Brand Mentions in Gemini Answers
Autorid: Dmitrij Żatuchin
arXiv:2609.04047 · september 2026 · Uuendatud 14. oktoober 2026 (v2)
Mitu korda peaksid küsima?
Viiele varasemale uuringule tuginedes näitab see protokoll, miks üks korduste arv ei sobi igale küsimusele. Vajalik valim sõltub sellest, kui palju vastused erinevad ja kui suurt muutust on vaja tuvastada.
Kasuta praktikasTee kõigepealt väike pilootkatse. Kasuta vastuste kõikumist, et planeerida oma otsuse jaoks piisavalt kordusi.
Töö pealkiri ja versioonid
The Dice Roll Method: A Standardized Protocol for Repeated-Query Auditing of Large Language Model Brand Recommendations
Autorid: Dmitrij Żatuchin
Asendab: Research Square rs-8980233, Research Square rs-9496731
arXiv:2609.05059 · september 2026 · Uuendatud 23. september 2026 (v2)
Kas oled leidnud oma valimist enamiku nimedest?
4500 vastuse audit 50 ostuküsimuse lõikes näitab, et avastamise hinnangud sõltuvad nimede eraldamise reeglitest, küsimuste valikust ja võrdluseks kasutatud lõplikust hulgast.
Kasuta praktikasKontrolli, kuidas nimed eraldatakse ja kas uus käivitus lisab endiselt uusi brände või allikaid.
Töö pealkiri ja versioonid
Measuring Brand and Source Discovery under Repeated LLM Queries: A Finite-Sample Audit
Autorid: Dmitrij Żatuchin
arXiv:2610.00253 · september 2026
Kas üks AI-võrdlustest saab teist asendada?
Selles korpuses kandsid üksikvastused tugevaid süsteemi sõrmejälgi. Koondatud brändimustrid ei kandunud eri küsimusteemade vahel usaldusväärselt üle.
Kasuta praktikasHoia tulemused süsteemi ja küsimustiku kaupa eraldi. Testi uuesti, enne kui kasutad võrdlustesti uues kategoorias.
Töö pealkiri ja versioonid
System Attribution in LLM Brand Recommendations: Single Responses Identify the System, Aggregated Brand Profiles Do Not Transfer
Autorid: Dmitrij Żatuchin
arXiv:2607.13304 · juuli 2026 · Uuendatud 1. november 2026 (v2)
Kas vastused läksid halvemaks või muutus skoor?
See uuring vaatleb automaatsete sentimendiskooride kõikumist keelte, mudelite ja päringute lõikes. Neid skoore ei ole uuringu keeltes brändi maine mõõdikuna valideeritud.
Kasuta praktikasLoe langeva skoori taga olevaid vastuseid ja valideeri hindamismeetod igas keeles, enne kui oma turunduses midagi muudad.
Töö pealkiri ja versioonid
Query Language Sensitivity in Automated Sentiment Scores of LLM Responses
Autorid: Dmitrij Żatuchin
arXiv:2610.00052 · september 2026
Kas muutuvad vastused võivad ikkagi korrata samu valikuid?
1184 kehtiva, kuuest arvust koosneva väljundi põhjal tekitasid kuus konfiguratsiooni palju vähem mitmekesisust kui sõltumatu ühtlane juhuvalik. Selles katses testiti numbreid. Brändisoovitusi see katse ei hõlmanud.
Kasuta praktikasAuditiküsimusena kontrolli nii seda, kui palju erinevaid vastuseid ilmub, kui ka seda, kui sageli juhtivad valikud tagasi tulevad.
Töö pealkiri ja versioonid
Ask a Language Model for Lottery Numbers: Concentration in Repeated Six-of-49 Outputs
Autorid: Dmitrij Żatuchin