Todos os trabalhos

Case de IA

Governança e evolução de prompts para produtos de Inteligência Artificial

Uma ferramenta interna para transformar prompts em ativos rastreáveis, comparáveis e governados — aproximando experimentação, revisão e publicação.

StatusFerramenta interna em uso
Papel de LeoIdealizador e responsável pela arquitetura e implementação
VisibilidadeParcialmente anonimizado
Visual conceitual do workspace PromptHub, com editor de prompts, respostas comparadas e trilha de avaliação.

Contexto

Prompt também é software quando passa a sustentar um produto.

Prompts precisavam evoluir com controle, rastreabilidade e uma experiência de experimentação menos dependente de ferramentas externas. O desafio não era apenas escrever instruções melhores, mas criar um espaço para observar, comparar e manter o que funcionava.

  • Versionar alterações e decisões
  • Comparar respostas entre modelos
  • Reduzir a distância entre teste e uso

Pergunta de produto

Como dar contexto para cada mudança sem tornar o experimento mais lento?

A direção foi tratar o prompt como um ativo que pode ser editado, executado, avaliado e revisado no mesmo fluxo. O produto precisava favorecer a velocidade do experimento sem abrir mão de uma trilha de evolução.

  • O que mudou?
  • Em qual contexto foi testado?
  • Qual evidência apoia a próxima versão?

Decisão de arquitetura

Um workspace único para edição, playground e versionamento.

A solução combina editor parametrizado, playground multi-LLM, histórico de commits e integração com Git. A arquitetura conceitual organiza o ciclo de trabalho ao redor do contexto, não do fornecedor do modelo.

  • Editor e variáveis
  • Execuções multi-LLM
  • Diff, histórico e publicação

Avaliação

A comparação precisa ser recuperável para virar decisão.

O fluxo de avaliação parte de cenários e entradas comparáveis. A interface pública não apresenta métricas como resultados finais: ela mostra o lugar onde critérios, respostas e decisões podem ser reunidos.

  • Casos de teste versionados
  • Sinais de qualidade e confiabilidade
  • Registro de incertezas

Arquitetura conceitual

Um sistema de partes conectadas por contexto e continuidade.

Diagrama público e anonimizado para validar a compreensão da solução sem expor detalhes sensíveis.

01

Workspace

Contexto, variáveis e intenção da solução.

02

Editor

Prompt legível, parametrizado e versionável.

03

Modelos

Execuções comparáveis entre provedores.

04

Evals

Critérios para aprender com cada rodada.

05

Git

Histórico e colaboração para evoluir.

Aprendizado em destaque

Aproximar experimentação, revisão e publicação torna a Engenharia de Prompt mais próxima das práticas de Engenharia de Software.