Chặng 5 · Training AI soát video trước khi đăng
Thử thách 5.4Chữa bài
Chữa danh sách soát video
- Nhiệm vụ
- Với mỗi lỗi lọt lưới, tức lỗi có trong video mà tác nhân phụ không chỉ ra, bạn gõ đủ ba ý: sai ở đâu, vì sao sai, đáp án đúng. Claude biến lỗi đó thành một câu soát mới trong danh sách, rồi cho tác nhân phụ soát lại để bạn kiểm tra.
- Từng bước
- Chọn một lỗi lọt lưới ở thử thách 5.3. Nếu tác nhân phụ đã bắt đủ 4 lỗi, chọn một lỗi ở thử thách 5.2 mà Claude báo chưa có câu soát tương ứng.
- Chép câu lệnh bên dưới, điền ba ý vào chỗ trong ngoặc vuông, rồi nhấn Enter.
- Đọc câu soát mới Claude vừa thêm vào danh sách. Câu soát phải trả lời được bằng Có hoặc Không, và áp cho mọi video, không chỉ cho video vừa lọt lỗi.
- Tác nhân phụ soát lại video vừa lọt lỗi. Khung xin phép hiện ra thì đọc rồi bấm như ở thử thách 5.3. Lần này, lỗi lọt lưới phải được ghi Chưa đạt, đúng giây, có ảnh làm bằng chứng.
- Tác nhân phụ soát tiếp bản đạt ở thử thách 5.2. Bản đạt vẫn phải đạt mọi câu soát, kể cả câu soát mới.
- Nếu sửa tới lần thứ hai mà tác nhân phụ vẫn bỏ sót cùng một lỗi, bạn mở phiên mới và viết câu soát rõ hơn, ví dụ ghi rõ con số cần đo.
- Câu lệnh
- Danh sách soát video chưa bắt được một lỗi trong [tên video, ví dụ video đề kiểm tra]. Sai ở đâu: [lỗi bị bỏ sót], ở giây [số giây]. Vì sao sai: [lý do danh sách chưa bắt được lỗi này, ví dụ chưa có câu soát nào hỏi về lỗi đó]. Đáp án đúng: thêm câu soát "[câu soát mới, trả lời được bằng Có hoặc Không]". Thêm câu soát này vào danh sách soát video để áp cho mọi video sau này. Sau đó giao cho tác nhân phụ soát lại hai video: video vừa nói ở trên, và bản đạt trong các ví dụ soát video. Tác nhân phụ trả về bảng kết quả như lần trước và không sửa video.Vì sao câu lệnh viết như vậyBa ý "sai ở đâu, vì sao sai, đáp án đúng" giúp Claude hiểu vì sao danh sách bỏ sót lỗi, chứ không chỉ thêm một dòng vào danh sách. Đáp án đúng ở đây là một câu soát mới trả lời được bằng Có hoặc Không, để lần sau tác nhân phụ soát theo đúng câu đó. Cụm "áp cho mọi video sau này" nói rõ câu soát mới không chỉ dành cho video vừa lọt lỗi. Câu cuối bắt tác nhân phụ soát lại cả bản đạt, để chắc câu soát mới không báo nhầm lỗi ở video đang tốt.
- Ví dụ
Nghề Content đã làm thế nào. Từ lần tiếng "xoẹt" chói tai ở video hướng dẫn SuperSoi, luật của kênh ghi thêm: tiếng hiệu ứng phải êm, không chói. Lỗi ở một video đã trở thành luật cho mọi video về sau, giống câu soát mới bạn vừa thêm vào danh sách.
Đọc thêm từ Anthropic (tiếng Anh): Demystifying evals for AI agents.
- Đạt khi
- Danh sách soát có thêm câu soát mới trả lời được bằng Có hoặc Không. Khi soát lại, tác nhân phụ ghi Chưa đạt đúng ở lỗi vừa lọt lưới, còn bản đạt vẫn đạt mọi câu soát.
Bẫy thật: Câu soát viết quá hẹp, như "Giây 9 có tiếng hiệu ứng không?", chỉ bắt được lỗi ở đúng một video. Hãy viết câu soát cho cả loại lỗi, ví dụ "Mỗi lần chữ hiện ra trên hình, có tiếng hiệu ứng đi kèm không?"