Phase 14: Agent Engineering

Chọn một phần nhỏ nhất có thể thay đổi quyết định

Một cái nhỏ chỉ hữu ích khi nó chứng minh một điều gì đó quan trọng. Một cái nhỏ mà không thể thay đổi quyết định tiếp theo chỉ là không hoàn chỉnh.

Type: Learn + Build

Languages: Python (stdlib)

Prerequisites: Phase 14 lesson 49

Time: ~65 minutes

Mục tiêu học tập

  • Định nghĩa một mảnh bằng những giả định nó chứng minh.
  • Tăng giá trị kết quả, giảm sự không chắc chắn, nỗ lực và hậu quả.
  • Tích thích bằng chứng đảo ngược hơn là cam kết sản xuất sớm.
  • Tránh các mảnh bỏ qua phần nguy hiểm của dòng công việc.

Bằng chứng từ đầu đến cuối

Một đoạn hữu ích vượt qua dòng công việc thực tế tối thiểu cần thiết để quan sát kết quả. Nó có thể hẹp về người dùng, dữ liệu, thời gian và khả năng. Nó không nên hẹp bằng cách loại bỏ sự không chắc chắn chính xác bạn cần kiểm tra.

Ví dụ:

  • Một bản đọc-chỉ-lần lặp lại trên mười sự cố thực kiểm tra nhận dạng dịch vụ và niềm tin của nhà điều hành.
  • Một bảng điều khiển được đánh bóng trên dữ liệu tổng hợp có thể kiểm tra sự hiểu biết nhưng không kiểm tra khả thi của dữ liệu.
  • Một máy tự trị sản xuất kiểm tra mọi thứ cùng một lúc với hậu quả không thể chấp nhận được.

Định nghĩa bằng chứng cần thiết trước

Hãy lấy các giả định mở có nguy cơ cao nhất và biến chúng thành một bộ bằng chứng cần thiết. Một mảnh ứng cử viên chỉ đủ điều kiện nếu nó bao gồm bộ đó.

Sau đó so sánh các mảnh đủ điều kiện trên:

DimensionDirection
Outcome valueMore is better
Uncertainty reducedMore is better
EffortLess is better
ConsequenceLess is better
ReversibilityMore is better

Điểm số của phòng thí nghiệm là đơn giản.

flowchart TD
  R[Required proof] --> C1[Candidate slice 1]
  R --> C2[Candidate slice 2]
  R --> C3[Candidate slice 3]
  C1 --> G{Covers all proof?}
  C2 --> G
  C3 --> G
  G -->|No| X[Reject]
  G -->|Yes| S[Compare evidence per effort and risk]
  S --> B[Build one slice]

Những điều tối thiểu sai lầm phổ biến

  • The UI-only minimum:loại bỏ dữ liệu và sự không chắc chắn về hoạt động.
  • The infrastructure-only minimum:chứng minh khả năng kỹ thuật mà không có giá trị người dùng.
  • The happy-path minimum:bỏ qua ngoại lệ tạo ra nguy cơ lớn nhất.
  • The demo minimum:tạo ra một vật cổ thuyết phục nhưng không có phép đo lặp lại.
  • The platform minimum:xây dựng máy móc tái sử dụng trước khi một dòng công việc kiếm được nó.

Thêm quy tắc dừng

Trước khi thực hiện, viết những gì xảy ra nếu mảnh thất bại:

  • bỏ kết quả;
  • thay đổi người dùng mục tiêu hoặc tình huống;
  • kiểm tra một cơ chế khác;
  • thu thập bằng chứng tốt hơn;
  • quyền hạn hạn hạn chế hơn nữa.

Nếu mọi kết quả dẫn đến việc xây dựng, thì đoạn không phải là thí nghiệm.

Hãy xây dựng nó

Phòng thí nghiệm lọc ứng cử viên bằng bằng chứng cần thiết, ghi điểm các mảnh hợp lệ, và viết outputs/slice-decision.json- Tôi không biết.

bashpython3 code/main.py
python3 -m unittest discover code/tests -v

Thêm một ứng cử viên rẻ hơn chứng minh chỉ một giả định yêu cầu. Nó nên vẫn không đủ điều kiện ngay cả khi điểm số của nó là cao.

Các bài tập

  1. Thiết kế ba mảnh cho cùng một kết quả ở các mức độ hậu quả khác nhau.
  2. Đề xuất bằng chứng cần thiết trước khi ghi điểm.
  3. Tháo một khả năng trong khi vẫn giữ lại bằng chứng quyết định.
  4. Thêm một quy tắc dừng cho phi công thất bại.
  5. Xác định một thành phần nền tảng có thể được sử dụng lại nên chờ cho đến khi cắt.

Đọc thêm

Những gì bạn giữ

Cứ giữ lạioutputs/slice-decision.jsonNó ghi lại tại sao mảnh này là mảnh nhỏ nhất có thể thay đổi quyết định.

This free lesson is part of the AI Engineering from Scratch curriculum. Read the full explanation, run the lesson code, and verify the result in the interactive reader or from the repository source.

Browse the complete course catalog or open this lesson on GitHub.