Pular para o conteúdo
hugo.pessoni
Voltar aos cases
Pesquisa~2 min

Alucinação como método

Pesquisa em andamento: operadores criativos das humanidades geram ideias mais originais que temperatura alta, sem perder adequação?

Resumo

Contexto

Alucinações de LLM costumam ser descartadas. A literatura já mostra que temperatura alta aumenta pouco a novidade e muito a incoerência, mas quase não compara isso com técnicas criativas estruturadas.

Ação

Escrevi o desenho de um experimento controlado que coloca operadores das humanidades (bissociação, cadáver esquisito, restrições do Oulipo e analogia) contra ruído aleatório na Alternative Uses Task. Os juízes são calibrados com avaliações humanas, e as hipóteses ficam pré-registradas no git antes de qualquer execução. Tudo roda com modelos locais, a custo zero.

Resultado

A spec de design tem as seções 1 e 2 aprovadas e as referências já foram levantadas; a implementação ainda não começou. O critério de sucesso é uma resposta honesta e medida, positiva ou negativa.

Lição

Antes de buscar um resultado bonito, defina como você saberia que ele é falso.

Arquitetura

Desenho do experimentoGerador com operadores criativos ou temperatura alta; juízes calibrados com avaliações humanas; análise pré-registrada.Tarefa AUTusos alternativosGeradoroperadores × temp.Juízes calibradosoriginal · adequadoAnálisepré-registradaAvaliações humanasground truth público

Versão longa

Pergunta de pesquisa

Operadores criativos estruturados geram usos alternativos mais originais que a amostragem com temperatura alta, sem perder adequação?

Por que a Alternative Uses Task

É uma tarefa clássica de criatividade com avaliações humanas públicas, que servem para calibrar os juízes automáticos antes de confiar neles. Abordar ideias abertas por área do conhecimento fica para uma segunda etapa.

Restrições

  • Custo zero: modelos de cerca de 8B rodando localmente numa GPU de 8 GB, e camadas gratuitas.
  • O que estiver marcado como sugestão na spec não é decisão. As decisões são registradas uma a uma.

Lições aprendidas

  • Pré-registro. Hipóteses e análise ficam versionadas antes dos dados, sem escolher a análise depois de ver o resultado.
  • Original e adequado. Medir só originalidade premia o absurdo; a definição de criatividade exige as duas coisas.