Princípios
Uma boa investigação deve permitir que a nossa hipótese esteja errada.
O teste decisivo de um trabalho não é a força das suas conclusões, mas a honestidade do seu desenho: se a hipótese estiver errada, o estudo deve ser capaz de o mostrar. Investigação que só pode confirmar não investiga — propaganda-se.
O problema
Confundir desenvolvimento com validação é o erro estrutural mais comum.
Desenvolver é construir: iterar, ajustar, melhorar com base no feedback imediato. Validar é testar: confrontar com critérios pré-definidos, em condições controladas, com a possibilidade real de falhar. São actividades legítimas — mas com regras opostas. No desenvolvimento, escolhe-se o que funciona; na validação, mede-se o que acontece, funcione ou não.
Quando os dois são misturados, o resultado é previsível: o processo que deveria testar passa a seleccionar os casos de sucesso. Uma ferramenta “avaliada” apenas onde funcionou não foi avaliada — foi demonstrada. Esta distinção atravessa todo o trabalho desta plataforma e é o primeiro critério de leitura de qualquer resultado aqui apresentado.
Desenvolvimento não é validação
A regra que condiciona tudo o resto.
Desenvolvimento: objectivo de melhorar o artefacto; critérios ajustáveis; feedback contínuo; fracassos usados para corrigir.
Validação: objectivo de estimar o valor real; critérios fixados antes; condições documentadas; fracassos registados e reportados.
Um mesmo artefacto atravessa as duas fases, mas nunca ao mesmo tempo. Os resultados de validação são produzidos por protocolo, não por iteração — e qualquer afirmação sobre validade deve dizer em que condições, com que amostra e contra que critérios foi obtida.
Resultados que aceitamos
Quatro sinais, todos científicos.
Um desenho honesto produz resultados de sinais diferentes — e todos são utilizáveis:
Positivos
A hipótese confirmada. Úteis quando o desenho permitia a alternativa: uma confirmação só vale o que valia a possibilidade de rejeição. Resultados positivos de estudos que não podiam dar negativo não confirmam nada.
Negativos
A hipótese rejeitada. Informação tão válida como a positiva — frequentemente mais, porque fecha caminhos e redirecciona recursos. Um resultado negativo bem documentado poupa a todos a repetição do mesmo erro.
Inconclusivos
Os dados não decidem. Não são um fracasso: indicam que o desenho, a amostra ou a medida não tinham poder suficiente. A conclusão honesta é sobre o desenho, não sobre o fenómeno.
Inesperados
O que não procurámos e apareceu. Fonte principal de novas perguntas — desde que distinguido do que foi testado. Exploração pós-hoc é hipótese geradora, não conclusão.
O resultado negativo de um estudo bem feito é contribuição. O resultado positivo de um estudo mal feito é ruído.
Método e rigor
Hipóteses antes de dados, critérios antes de resultados.
Três disciplinas estruturam o trabalho: hipóteses e critérios de decisão fixados antes da análise; amostras definidas por justificação, não por conveniência; e replicação tratada como parte do método — um resultado importa na medida em que resiste a repetição independente.
Os erros mais perigosos não são os técnicos, são os de sequência: analisar primeiro e hipotetizar depois; concluir primeiro e medir depois. A ordem não é burocracia — é o que separa o teste da justificação.
Riscos e limitações
O sistema de incentivos premia a confirmação. Nós não.
Publicações, financiamentos e prazos empurram para resultados positivos e conclusivos — e contra a publicação do resto. Reconhecer esta pressão é condição para a resistir: registamos estudos antes da recolha, reportamos resultados de qualquer sinal e tratamos os limites do estudo como conteúdo, não como incómodo.
Pequenas amostras, contextos únicos e parcerias de conveniência são limitações comuns neste tipo de trabalho; são aceites quando declaradas e inscritas nas conclusões.
Compromisso. Nenhuma afirmação científica é publicada neste site sem indicação das condições em que foi produzida e das limitações que a condicionam.
Critério de valor
O valor é conhecimento que sobrevive à tentativa de o refutar.
Um resultado só tem valor real quando foi produzido por um desenho que o podia falsificar — e sobreviveu. Este é o critério único que distingue investigação de narração: não a elegância da história, mas a robustez do teste a que foi submetida.
Continuar a explorar