25 Dos Resultados às Alegações
Este capítulo faz parte de um livro em desenvolvimento ativo e ainda não passou pela revisão do autor. O conteúdo pode mudar conforme a revisão avança.
A decisão de pesquisa. A sua análise imprimiu um número. Agora você decide qual frase esse número permite afirmar: a manchete que você vai mostrar em público e defender em voz alta, escrita de modo que o verbo fique dentro do que o seu desenho de pesquisa estabeleceu e que a incerteza apareça no mesmo campo de visão. Você escolhe as palavras. Você as trava. E nunca deixa uma ferramenta levar a sua alegação para além do limite dela.
25.1 Por que essa decisão importa
A decisão em jogo: o verbo da sua manchete e até onde a sua evidência deixa ele chegar.
“No salão de pôsteres eu aponto para um número e pergunto de onde ele veio e o que ele permite dizer. Se a manchete diz ‘reduz a pressão arterial’ mas o estudo só observou quem escolheu caminhar, eu paro de ler. Uma alegação que corre mais do que a evidência me diz para desconfiar do painel inteiro.” — uma avaliadora de integridade em pesquisa trabalhando numa sessão de pôsteres
Um resultado ainda não é uma alegação. A sua análise imprime um número; a sua manchete afirma uma frase. É na distância entre os dois que a maioria dos projetos quebra, porque a frase quase sempre quer dizer mais do que o número conquistou. A avaliadora acima não está testando a sua estatística. Ela está testando se as suas palavras batem com a evidência que está por baixo delas. Este capítulo é o hábito que fecha essa distância antes que um estranho a encontre aberta.
25.2 O conceito
Comece pelas duas palavras entre as quais este capítulo vive. Um resultado é um número que a sua análise produziu, como uma diferença de 6 pontos entre as médias de dois grupos. Uma alegação é uma frase que você afirma e vai defender, como “o grupo que caminhava tinha pressão arterial mais baixa”. Transformar o primeiro na segunda é uma decisão, não um passo de formatação, porque você escolhe quanto a frase pode dizer.
Quatro ideias governam essa escolha, e manter as três primeiras separadas é o que impede o excesso de alegação antes que ele comece.
A sua pergunta é o que você se propôs a descobrir, e o tipo dela vem das suas próprias palavras. Exemplo: “caminhar reduz a pressão arterial?” pergunta o que uma intervenção mudaria, então é causal, e continua causal independentemente dos dados que você conseguiu coletar.
O seu status de identificação é se este desenho consegue de fato entregar essa resposta. Exemplo: se você observou quem já tinha escolhido caminhar, nada separa a caminhada do tipo de pessoa que caminha, então o status é não identificada por este desenho sob as suposições que consigo defender. Repare no que esse status não diz. Ele nunca repete a palavra “causal”, porque o tipo pertence à pergunta e o status pertence ao desenho; escrever “causal e não identificada” como um status só funde em silêncio os dois campos que você acabou de separar.
O seu resultado é a quantidade que esta evidência de fato produziu. Aqui é uma associação descritiva entre caminhar e pressão arterial, que é real e digna de relato, e que fica ao lado da pergunta causal em vez de substituí-la.
Escritos por extenso, os quatro campos formam um cartão que você reaproveita em qualquer projeto:
Tipo da pergunta: causal. Status de identificação: não identificada por este desenho sob as suposições declaradas. Resultado: associação observada. Fronteira da alegação: apenas associação.
A sua fronteira da alegação é o que esses três juntos autorizam você a escrever, e ela mora no verbo da manchete. Exemplo: sem argumento de identificação, você escreve “esteve associado a valores mais baixos”, nunca “reduziu”. Leia a condição com atenção: o que conquista um verbo causal é um argumento de identificação defendido. Sortear é a via mais limpa de obter um, e um capítulo mais adiante mostra desenhos observacionais que sustentam respostas causais quando as suas suposições são argumentadas e defendidas. O que você nunca pode fazer é usar o verbo sem o argumento.
Mais uma ideia deixa a honestidade da alegação visível. Incerteza no mesmo campo de visão significa que o intervalo ou a ressalva fica bem ao lado da alegação, e não numa nota de rodapé. Exemplo: “cerca de 6 pontos a menos (intervalo de 95%: 1 a 11)” impresso embaixo da manchete, para que quem lê encontre a dúvida no mesmo momento em que encontra o número. Um limite que a pessoa precisa caçar é um limite fazendo trabalho escondido.
Mais um hábito sustenta tudo isso. Rastreabilidade significa que todo número que você mostra volta até a célula exata do notebook que o produziu. Exemplo: a diferença de 6 pontos no seu painel aponta para a única linha de código que a calculou, e você consegue mostrar essa linha quando alguém da banca pergunta. Um número que você não consegue rastrear não pode subir na parede.
25.3 Um exemplo resolvido
Uma estudante de biologia conduz um pequeno piloto de fisiologia humana. Quarenta voluntários usam um contador de passos por um mês. Vinte caminham pelo menos 8.000 passos por dia; vinte não. A pressão arterial sistólica de repouso média fica em 128 no grupo ativo e 134 no grupo menos ativo, uma diferença de 6 pontos.
O resultado é essa diferença de 6 pontos. A alegação é a decisão. O rascunho da manchete diz “Caminhar REDUZ a pressão arterial”, desenhado como duas barras num eixo que começa em 125, o que faz a pequena diferença parecer um abismo, com os dois grupos distinguidos apenas por vermelho e verde.
Percorra a decisão. A pergunta é causal e continua causal: você quer saber se caminhar reduz a pressão. O que este desenho não consegue é respondê-la. Ninguém foi designado a caminhar, então o grupo ativo pode diferir em idade, dieta ou saúde de base. Isso significa que o verbo “reduz” reivindica um cruzamento que o desenho nunca pagou, e o verbo honesto é “esteve associado a valores mais baixos”. O eixo truncado precisa cair para a escala completa, para que a diferença de 6 pontos se leia como a diferença modesta que ela é. O intervalo de 95% vai de mais ou menos 1 a 11 pontos, largo o bastante para que a manchete honesta o carregue no mesmo campo de visão. E cada barra recebe um rótulo com o valor, para que uma pessoa daltônica ou que use leitor de tela receba o número, e não só a cor.
A alegação travada: “Nesta amostra, os voluntários mais ativos tiveram, em média, cerca de 6 pontos a menos de pressão arterial sistólica de repouso (intervalo de 95%: 1 a 11); isso é uma associação observada, não evidência de que caminhar causou a queda”. O mesmo resultado, com uma alegação que sobrevive à avaliadora.
25.4 O laboratório no Colab
Este capítulo tem o seu próprio notebook companheiro — abra-o no Colab pelo selo acima. O notebook reúne os prompts e o código do capítulo e termina com o espaço de trabalho Agora é a sua vez, para você completar a etapa do capítulo no seu projeto sem sair do Colab. O laboratório completo de sala de aula por trás deste capítulo é o notebook do curso nb11 — Poster criticism + final poster lock (abrir no Colab), parte do curso companheiro apresentado no apêndice Para instrutores. Lá você faz uma auditoria de galeria em uma figura principal desenhada de duas maneiras a partir dos mesmos números, ensaia uma defesa oral com três lentes e trava cada número na sua célula e cada citação numa fonte real antes de a sua página ficar definitiva.
25.5 Prompts de IA recomendados
Comprometa-se primeiro com a sua própria resposta e só depois delegue. Cada prompt é uma tarefa verificável, nunca um pedido de veredito.
Espere rodar cada um mais de uma vez. Você lê o que volta, nomeia a parte que está errada e pergunta de novo com essa correção dentro do prompt. Esse vaivém é o método, não um sinal de que você formulou mal o pedido. Algumas ferramentas hoje rodam várias voltas por conta própria antes de mostrar qualquer coisa, o que aumenta a responsabilidade do seu último passo em vez de diminuí-la, porque boa parte do raciocínio aconteceu onde você não podia olhar.
Localize a fonte real por trás de uma alegação de fisiologia.
Act as a literature assistant in human physiology. My headline claims regular
walking is linked to lower blood pressure. Name up to three peer-reviewed sources
or clinical guidelines that support this, with title, authors, year, and venue.
Only list work you are confident exists; mark anything uncertain.Depois de rodar, verifique: abra cada fonte numa base de dados de biblioteca e confirme que ela existe e diz o que você alega. Neutraliza a fabricação confiante (uma citação inventada chega com a mesma confiança de uma real).
Transforme o seu resultado numa lista de perguntas difíceis.
Here is my headline claim: "[paste it]" and my compass position: "descriptive,
observational." Generate the eight hardest questions a skeptic would ask, and mark
which single audit each one belongs to: claim boundary, figure honesty,
uncertainty, or accessibility.Depois de rodar, verifique: associe cada pergunta a uma auditoria e confira todas contra os números que você imprimiu; uma auditoria ausente é a lacuna que a lista arrumadinha escondeu. Neutraliza a ilusão de completude (uma lista longa e organizada que pula justamente o defeito que mais importa).
Faça red team no verbo.
Here is my written headline: "[paste it]." Act as a hostile reviewer and find every
place the verb claims more than an observational design licenses. Do not rewrite it
for me; list the exact words so I can fix them myself.Depois de rodar, verifique: leia cada palavra sinalizada contra a sua posição na bússola e mantenha só as objeções que o seu desenho realmente impõe. Neutraliza a mudança silenciosa de escopo (uma alegação promovida em silêncio de associação para causa).
Três decisões continuam suas. Você escolhe o verbo da sua manchete, a palavra que fixa a fronteira da sua alegação. Você faz a escolha entre defender e conceder quando uma pergunta empurra essa fronteira em voz alta. E você toma a decisão de travamento: o julgamento de que todo número está rastreado, toda citação resolve e a alegação está pronta para ser definitiva. Uma ferramenta pode rascunhar perguntas e caçar fontes, mas não pode decidir o que a sua evidência autoriza nem quando a sua alegação foi conquistada.
25.6 Um caso de falha da IA
Você cola a sua manchete honesta numa ferramenta e pede para deixá-la “mais forte”. Ela devolve, com total confiança: “Caminhar Reduz a Pressão Arterial em 6 Pontos”. Fica lindo e está errado. A ferramenta promoveu o seu verbo de associação para causa e descartou o seu intervalo, uma mudança silenciosa de escopo disfarçada de revisão de texto.
Você pega isso comparando o novo verbo com o que o seu desenho conquistou. A sua pergunta era causal e continua causal, mas ninguém foi designado a caminhar, então nada identifica essa resposta. O seu estudo nunca designou ninguém a caminhar, então “reduz” reivindica um cruzamento que você não pagou. Você também nota que os “6 pontos” agora aparecem sozinhos, sem nenhum intervalo ao lado. Você volta para “esteve associado a cerca de 6 pontos a menos (intervalo de 95%: 1 a 11)”. A reescrita fluente revisou o seu estilo; só você pode revisar a sua alegação.
25.7 Agora é a sua vez
Depois do último capítulo você sabe onde a sua confiança realmente para; este passo transforma cada um dos seus resultados numa frase que você imprimiria e defenderia.
- Liste todo resultado que você poderia colocar diante de quem lê e depois escreva a frase de alegação que cada um autoriza.
- Confira cada verbo contra o que o seu desenho estabeleceu e rebaixe os que vão longe demais. “Causou” vira “esteve associado a”; “prevê” vira “sinalizou”.
- Escreva uma linha de fronteira ao lado de cada alegação dizendo o que ela não estabelece, e coloque a incerteza no mesmo campo de visão do número.
- Rastreie cada número até a célula que o produziu e corte os que você não consegue percorrer de volta. Depois escolha a sua alegação principal, a frase que você diria primeiro se tivesse dez segundos.
- Registre isso no seu AI Research Ledger (registro de uso de IA) e verifique pelo menos uma alegação com um método nomeado do Guia de Verificação. Uma IA revisora pode fazer a checagem junto com você; a decisão de aceitar ou rejeitar continua sua.