Phase 14: Agent Engineering

Mapa de suposições e resolva primeiro a mais arriscada

Um mapa de estrada esconde incerteza dentro de características.

Type: Learn + Build

Languages: Python (stdlib)

Prerequisites: Phase 14 lesson 48

Time: ~65 minutes

Objetivos de aprendizagem

  • Convertem o trabalho proposto em suposições explícitas.
  • O impacto, a incerteza e a irreversão são indicados separadamente.
  • Escolha a próxima experiência por risco, não pelo entusiasmo.
  • Substituir as suposições testadas por evidências e decisões.

Cada edifício contém apostas

Uma ferramenta de incidente pode depender de que todas estas informações sejam verdadeiras:

  • O contexto de alerta contém informações suficientes para identificar um serviço;
  • Os engenheiros confiam numa recomendação que não foram eles próprios a obter;
  • O tempo de resposta desejado é importante operacionalmente;
  • Os dados necessários podem ser acessados sem autoridade insegura;
  • O fluxo de trabalho ocorre com frequência suficiente para justificar a manutenção.

Estas não são tarefas de implementação, mas condições para que a construção seja valiosa, utilizável, viável e segura.

Classificação de assuntos

ClassQuestion
ValueWill the outcome matter enough?
UsabilityCan the user understand and act on it?
FeasibilityCan the system produce it with available data and constraints?
ViabilityCan the organization sustain cost, ownership, and operation?
SafetyCan it fail without unacceptable consequence?

Escreva suposições como declarações falsificáveis. A característica é útil não pode ser testada. Oito de dez engenheiros em chamada identificam o serviço correto mais rapidamente com o resultado de somente leitura pode.

O risco não é um número

O laboratório usa três dimensões de um a cinco:

  • Impact:danos se a suposição for falsa.
  • Uncertainty:fraqueza das provas atuais.
  • Irreversibility:custos de aprendizagem após o compromisso.

A pontuação do exemplo multiplica o impacto e a incerteza, adicionando então a irreversão. A fórmula não é universal.

flowchart LR
  A[Assumptions] --> S[Score risk]
  S --> H[Highest open risk]
  H --> X[Cheapest decisive experiment]
  X --> E{Evidence}
  E -->|Supports| B[Bounded build]
  E -->|Rejects| R[Reframe or stop]

Conceba uma experiência, não um ritual de confirmação

Um teste útil tem:

  • Uma alegação que possa ser falsa;
  • Uma população ou uma amostra realista;
  • Um resultado observável;
  • Um limiar decidido antes do resultado;
  • A próxima decisão é a de passar, falhar e provas ambíguas.

Evite os testes que só demonstram que a equipe pode construir a ideia.

Reversibilidade muda ordem

As escolhas irreversíveis e de alta consequência precisam de evidências anteriores. Uma repetição de somente leitura pode preceder uma integração de produção. Um adaptador temporário pode preceder uma migração de dados. Uma recomendação aprovada pelo ser humano pode preceder uma ação automática.

A forma da construção deve seguir a forma da incerteza.

Construí-lo

O laboratório classifica suposições, distingue as reivindicações testadas de abertas, seleciona o maior risco aberto e escreve outputs/assumption-map.json- Não .

bashpython3 code/main.py
python3 -m unittest discover code/tests -v

Mudança das evidências sobre a suposição de maior risco e observe como a próxima experiência muda.

Exercícios

  1. Escreva cinco suposições para um recurso que deseja construir.
  2. Adicione uma suposição de segurança que a sua lista de características omitiu.
  3. Defina um limiar que te faça parar a construção.
  4. Substitua um grande experimento por um teste mais barato e decisivo.
  5. Compare a classificação de riscos com a prioridade do roteiro e explique a desajuste.

Mais leitura

O que você guarda

  • Não .outputs/assumption-map.jsonA próxima lição usa-o para escolher a parte mais pequena que possa produzir provas decisivas.

This free lesson is part of the AI Engineering from Scratch curriculum. Read the full explanation, run the lesson code, and verify the result in the interactive reader or from the repository source.

Browse the complete course catalog or open this lesson on GitHub.