Workflow

Show how unstable the AI answer really is

Roll one question ten times, see which brands hold across every answer and which flicker, then hand finance the PDF.

Edistynyt
5 minutes
Marketing Manager, Marketing Director, Content Strategist
Tämä opas ruudulla, alusta loppuun.Avaa video uudessa välilehdessä

Hook: Heitä yksi ostajan kysymys kymmenen kertaa ja anna sitten talousosastolle vakausraportti PDF:nä. Tuon yhden kysymyksen laskeminen käsin maksaa EUR 135–EUR 270 analyytikon aikaa.

Mitä osaat tämän jälkeen

  • Heität yhden ostajan kysymyksen kymmenen kertaa yhtä mallia vasten ja luet kymmenen vastausta rinnakkain
  • Lajittelet jokaisen mallin nimeämän brändin neljään kaistaan sen mukaan, moniko heitto nimesi sen, ja asetat tuon eron yhdelle kalvolle
  • Erotat ne lauseet, joihin malli palasi joka heitolla, niistä jotka se sanoi kerran
  • Luet kaikki kymmenen vastausta kokonaisina sekä sivut, joita kukin pohjautuva vastaus siteerasi
  • Viet raportin muodossa dice-roller-report-<timestamp>.pdf tai .md budjettikokoukseen

Kesto: 4:44 | Vaikeustaso: Edistynyt

Pyydät budjettia näkyäksesi tekoälyn vastauksissa, ja johto kuulee pyynnön ja kuvittelee hakusijoituksen: yhden kiinteän listan, joka pitää kunnes joku muuttaa sitä. Pyyntö kuolee siihen kokoukseen, jossa kollega avaa ChatGPT:n puhelimesta, kirjoittaa kategoriakysymyksesi kerran, näkee brändisi vastauksessa ja päättää että koko ongelma on kuviteltu. Yksi heitto ei todista mitään kumpaankaan suuntaan. Kymmenen heittoa samasta kysymyksestä samaa mallia vasten antaa kymmenen eri listaa, ja tuon vaihtelun muoto on argumentti. Kilpailijasi pitää paikkansa vastauksessa sanamuodosta riippumatta; sinä näyt kuudessa heitossa ja katoat neljästä. Tuo ero on luku heti kun joku laskee sen.

Mitä tämä maksaa nyt

Oletus: analyytikko EUR 90 tunnissa. Kymmenen tuoretta keskustelua, sama kysymys liitettynä kymmenesti, kymmenen vastausta tallennettuna ja sitten laskelma siitä, kuka nimettiin ja missä.

Työ käsinAikaKustannus hinnalla EUR 90/h
Yksi kysymys, kymmenen heittoa1.5–3 hEUR 135–EUR 270
Kymmenen kysymyksen sarja15–30 hEUR 1,350–EUR 2,700

Menetelmä myös liukuu. Seuraava analyytikko laskee lauseiden toiston eri tavalla, joten tämä auditointi ja edellinen ovat kaksi mittausta saman nimilapun alla.

Tuo taulukko hinnoittelee kysymisen ja laskennan, mikä on se työ jonka tiimi oikeasti tekee. Vaihe joka siitä jää pois on se, joka tuottaa luvun. Kymmenessä vastauksessa on kymmeniä erillisiä väitteitä, ja rahan arvoinen kysymys on, mitkä niistä malli toistaa joka heitolla ja mitkä se sanoo kerran. Käsin voit vain verrata sanamuotoja, joten ”me olemme halvimmat” ja ”kukaan ei alita meitä” päätyvät kahdelle eri riville. Rankfor.AI vertaa väitteitä merkityksen mukaan, kokoaa samaa tarkoittavat yhdelle riville ja jakaa nuo rivit sen mukaan, kuinka monta heittoa kukin selvisi. Tälle riville ei aseteta tuntihintaa, koska lähes kukaan ei varaa sitä päivää, jonka se veisi.

Dice Roller on Strategist-tilauksessa hintaan EUR 496 kuukaudessa. Hinnalla EUR 270 kysymystä kohti tilaus kuittautuu toisella kysymyksellä (2 x 270 = 540). Hinnalla EUR 135 kysymystä kohti siihen menee neljä (4 x 135 = 540).

Mitä videolla näkyy

  1. Dice Roller avautuu Tools-valikosta Stability-asetuksella. Yksi kortti pitää koko ajon: kysymys, brändisi nimi ja liukusäädin sille, montako kertaa kysytään.
  2. Asetukset menevät sisään. Kirjoita ostajan kysymys niin kuin asiakas sen kirjoittaisi, lisää brändisi nimi jotta jokainen maininta lasketaan, vedä liukusäädin arvosta 3 arvoon 10, valitse Search-tila ja aja.
  3. Kolme korttia avaa tulossivun: johdonmukaisuusluku, merkityksellinen päällekkäisyys, heittojen määrä, ja niiden alla sävyjakauma kaikkien kymmenen vastauksen yli.
  4. Brändipaneeli lajittelee jokaisen nimen, johon malli tarttui, neljään kaistaan sen mukaan, moniko kymmenestä heitosta nimesi sen: Always 80 %:n heitoista ylöspäin, Frequent 50:stä, Occasional 20:stä ja Rare sen alta.
  5. Vaihda paneeli Table-näkymään, ja koko lista saapuu määrineen. Kilpailija Always-kaistalla ja oma nimesi Occasional-kaistalla on se kalvo.
  6. Message Stability jakaa lauseet: ne jotka malli sanoo joka kerta, ne joita se vaihtelee ja ne jotka ilmestyivät kerran. Rivit ryhmitellään merkityksen mukaan, joten kolmella tavalla esitetty huomio laskeutuu yhdelle riville.
  7. Responses pitää kaikki kymmenen vastausta kokonaisina, mitään ei ole tiivistetty pois, ja brändinimet on korostettu tekstin sisällä kaistansa värillä.
  8. Sources listaa jokaisen siteeratun sivun, kuinka monta heittoa se ruokki, ja yhden klikkauksen takaisin siihen vastaukseen jonka se tuotti. Tämä välilehti on olemassa, koska ajo käytti Search-tilaa.
  9. Export kirjoittaa PDF:n, ja loppuruutu asettaa sen talousosaston eteen.

Mitä tarvitset

  • Strategist, EUR 496 kuukaudessa, tai Enterprise.
  • Projekti, jolla on valmis skannaus. Ilman sitä ajopainike ei lähetä mitään.
  • Malliksi asetettuna Gemini, ChatGPT tai Grok ennen aloitusta. Sen vaihtaminen kesken ajon tyhjentää lomakkeen.
  • Search-tila lähdelistaa varten. Memory-tilassa Sources-välilehteä ei ole lainkaan.
  • Aikaa. Kymmenen heittoa on liukusäätimen hidas pää, joten aloita ajo päivää ennen kuin tarvitset vastauksen.
  • Yksi Dice Roller -ajo kerrallaan skannausta kohti.

Usein kysyttyä

Kuinka monta heittoa voin pyytää? Kymmenen. Liukusäädin loppuu siihen, joten tämä mittaa toistoa kymmenen vastauksen yli eikä väitä mitään niiden ulkopuolelta.

Mikä tekoäly vastaa? Gemini, ChatGPT tai Grok. Yksi ajo kysyy yhdeltä mallilta, siltä joka on projektiisi asetettu, joten kolmen mallin kuva tarkoittaa kolmea ajoa.

Onko johdonmukaisuusluku tilastollisesti merkitsevä? Ei. Molemmat luvut tuolla sivulla ovat painotettuja yhdistelmiä välillä 0–1, näytettynä prosentteina. Argumentti jonka viet hallitukselle on kaistojen välinen ero ja sen alla olevat kymmenen vastausta.

Jatkaako se kysymyksen vahtimista puolestani? Ei. Jokainen ajo on manuaalinen klikkaus. Ajastusta eikä hälytystä ei ole, joten kuukausirytmi on asia jonka laitat omaan kalenteriisi.

Heitä se kysymys, jonka hallituksesi kirjoittaisi, ja aseta sitten neljä kaistaa yhdelle kalvolle.

Aiheet

Video WalkthroughStability AnalysisDice RollResponse ConsistencyCore Messages

Tee tämä omalle brändillesi

Rankfor.AI tekee tämän työn aikataulun mukaan, sinun ja asiakkaidesi brändeille.

© 2025-2026 Rankfor.AI™ Kaikki oikeudet pidätetään

Ask AI about Rankfor.AI

Rankfor.AI sp. z o.o., Skarbowcow 23B, 53-025 Wroclaw, Poland

KRS: 0001190083 | NIP: 8993033605

Käytämme evästeitä

Käytämme välttämättömiä evästeitä saadaksemme sivustomme toimimaan. Suostumuksellanne voimme käyttää myös analytiikkaevästeitä ymmärtääksemme, miten käytätte työkalujamme (kuten Dice Rolleria), jotta voimme parantaa niitä. Lue lisää