Workflow

Show how unstable the AI answer really is

Roll one question ten times, see which brands hold across every answer and which flicker, then hand finance the PDF.

Avancado
5 minutes
Marketing Manager, Marketing Director, Content Strategist
Este guia no ecrã, do início ao fim.Abrir o vídeo num novo separador

Hook: Rode uma pergunta de comprador dez vezes e entregue ao financeiro o PDF de estabilidade. Contar essa única pergunta à mão custa de EUR 135 a EUR 270 de tempo de analista.

O que você vai conseguir fazer

  • Rodar uma pergunta de comprador dez vezes contra um modelo e ler as dez respostas lado a lado
  • Separar cada marca que o modelo citou em quatro faixas, por quantas rodadas a citaram, e colocar essa distância num slide
  • Separar as frases que o modelo repetiu em todas as rodadas daquelas que ele disse uma vez
  • Ler as dez respostas por inteiro, mais as páginas que cada resposta ancorada citou
  • Exportar o relatório como dice-roller-report-<timestamp>.pdf ou .md para a reunião de orçamento

Duração: 4:44 | Dificuldade: Avançado

Você está pedindo orçamento para aparecer nas respostas de IA, e a liderança ouve o pedido e imagina um ranking de busca: uma lista fixa que fica de pé até alguém mudá-la. O pedido morre na reunião em que um colega abre o ChatGPT no celular, digita a pergunta da sua categoria uma vez, vê sua marca na resposta e conclui que o problema inteiro é imaginário. Uma rodada não prova nada em nenhuma das direções. Dez rodadas da mesma pergunta contra o mesmo modelo dão dez listas diferentes, e o formato dessa variação é o argumento. Seu concorrente segura a resposta seja qual for a formulação; você aparece em seis rodadas e some em quatro. Essa distância vira um número assim que alguém a conta.

Quanto isso custa hoje

Premissa: um analista a EUR 90 por hora. Dez conversas novas, a mesma pergunta colada dez vezes, dez respostas salvas e depois uma contagem de quem foi citado e onde.

Trabalho, à mãoTempoCusto a EUR 90/h
Uma pergunta, dez rodadas1.5 a 3 hEUR 135 a EUR 270
Um conjunto de dez perguntas15 a 30 hEUR 1,350 a EUR 2,700

O método também escorrega. O próximo analista conta a repetição de frases de outro jeito, então esta auditoria e a anterior são duas medições usando o mesmo rótulo.

Essa tabela precifica o perguntar e o contar, que é o trabalho que um time de fato faz. A etapa que ela deixa de fora é a que produz o número. Dez respostas guardam dezenas de afirmações separadas, e a pergunta que vale dinheiro é quais delas o modelo repete em todas as rodadas e quais ele diz uma vez. À mão dá para combinar apenas a redação, então “somos os mais baratos” e “ninguém cobra menos que a gente” caem em duas linhas diferentes. A Rankfor.AI compara as afirmações por significado, coloca as que dizem a mesma coisa numa única linha e depois separa essas linhas por quantas rodadas cada uma sobreviveu. Nenhum valor por hora aparece nessa linha, porque quase ninguém reserva o dia que ela levaria.

O Dice Roller fica no Strategist, a EUR 496 por mês. A EUR 270 por pergunta o plano é coberto pela segunda pergunta (2 x 270 = 540). A EUR 135 por pergunta são precisas quatro (4 x 135 = 540).

O que o vídeo mostra

  1. O Dice Roller abre em Tools, na configuração de rodada Stability. Um cartão guarda a execução inteira: a pergunta, o nome da sua marca e um controle deslizante para quantas vezes perguntar.
  2. A configuração entra. Digite a pergunta do comprador do jeito que um cliente digitaria, adicione o nome da sua marca para que cada menção seja contada, arraste o controle de 3 para 10, escolha o modo Search e rode.
  3. Três cartões abrem a página de resultados: pontuação de consistência, sobreposição semântica, número de rodadas, com a divisão de sentimento das dez respostas embaixo.
  4. O painel de marcas separa cada nome que o modelo usou em quatro faixas, por quantas das dez rodadas o citaram: Always em 80% das rodadas ou mais, Frequent a partir de 50, Occasional a partir de 20, Rare abaixo disso.
  5. Troque esse painel para Table e a lista inteira chega com as contagens ao lado. Um rival em Always contra o seu próprio nome em Occasional é o slide.
  6. Message Stability separa as frases: as que o modelo diz toda vez, as que ele varia e as que apareceram uma vez. As linhas são agrupadas por significado, então um ponto feito de três jeitos cai numa linha só.
  7. Responses guarda as dez respostas por inteiro, sem nada resumido, com os nomes de marca destacados na cor da faixa dentro do texto.
  8. Sources lista cada página citada, quantas rodadas ela alimentou e um clique de volta para a resposta que ela produziu. Esta aba existe porque a execução usou o modo Search.
  9. Export escreve o PDF, e o quadro final coloca isso na frente do financeiro.

O que você precisa

  • Strategist, EUR 496 por mês, ou Enterprise.
  • Um projeto com scan concluído. Sem ele o botão de rodar não envia nada.
  • O modelo definido como Gemini, ChatGPT ou Grok antes de começar. Trocá-lo no meio limpa o formulário.
  • Modo Search para a lista de fontes. O modo Memory não tem aba Sources.
  • Tempo. Dez rodadas é a ponta lenta do controle deslizante, então comece a execução no dia anterior ao que você precisa da resposta.
  • Uma execução do Dice Roller por vez em cada scan.

Perguntas que as pessoas fazem

Quantas rodadas posso pedir? Dez. O controle para aí, então isto mede repetição em dez respostas e não afirma nada além delas.

Qual IA está respondendo? Gemini, ChatGPT ou Grok. Uma execução consulta um modelo, o que estiver definido no seu projeto, então um retrato de três modelos são três execuções.

A pontuação de consistência é estatisticamente significativa? Não. As duas pontuações daquela página são composições ponderadas entre 0 e 1, exibidas como percentuais. O argumento que você leva à diretoria é a distância entre as faixas e as dez respostas embaixo dela.

Ele continua vigiando a pergunta para mim? Não. Cada execução é um clique manual. Não há agendamento nem alerta, então um ritmo mensal é algo que você coloca no seu próprio calendário.

Rode a pergunta que sua diretoria digitaria e coloque as quatro faixas em um slide.

Topics

Video WalkthroughStability AnalysisDice RollResponse ConsistencyCore Messages

Faça isto na sua própria marca

A Rankfor.AI faz esta tarefa de forma agendada, para a sua marca e as dos seus clientes.

Usamos cookies

Usamos cookies essenciais para fazer nosso site funcionar. Com o seu consentimento, também podemos usar cookies analíticos para entender como você usa nossas ferramentas (como o Dice Roller) para que possamos melhorá-las. Saiba mais