Перейти к содержимому

Cùng Model AI, Hiệu Suất Gấp 6 Lần: Harness Engineering Là Hệ Điều Hành Của Agent

aivn360

0:00 / 0:00

Cùng Model AI, Hiệu Suất Gấp 6 Lần: Harness Engineering Là Hệ Điều Hành Của Agent

222 просмотра · 3 месяца назад
aivn360
235 подписчиков
222 просмотра · 3 месяца назад
Tóm tắt: Cùng một mô hình AI, cùng một bài kiểm tra phân tích mã nguồn cực kỳ phức tạp — nhưng hiệu suất giải quyết vấn đề đột ngột gấp sáu lần, không cần thêm tham số hay dữ liệu mới. Bí mật nằm ở Harness: cấu trúc điều phối bao quanh mô hình, đóng vai trò như hệ điều hành quản lý bộ nhớ, luồng xác thực và logic kiểm soát. Cuộc thảo luận phân tích tại sao thêm bộ xác minh lại làm giảm hiệu suất, tại sao Natural Language Harness hiệu quả hơn Python/YAML truyền thống tới 13 lần về token, và tại sao nghệ thuật của kỹ sư AI hiện đại chính là biết thứ gì cần mạnh dạn cắt bỏ. Điểm chính: Phương trình mới: AI Agent = Model + Harness. Harness là "hệ điều hành" quản lý 5 mẫu hình cốt lõi: prompt chaining, routing, parallelization, orchestrating workers, và vòng lặp đánh giá. Kiến trúc 3 tác nhân của Anthropic (planner + creator + evaluator) xuất sắc nhưng đẩy chi phí từ $9 lên $200 mỗi tác vụ — không thể mở rộng quy mô. SWE Bench: Natural Language Harness đạt 74-76% thành công tương đương code truyền thống, nhưng chỉ tiêu tốn 1,2 triệu token (so với 16,3 triệu) và hoàn thành trong 7 phút (so với 32 phút). MetaHarness (Stanford): AI dùng Claude Opus tự viết và tối ưu hóa harness từ hồ sơ lỗi thô. Mô hình nhỏ (2Q) với harness do AI tối ưu đánh bại Opus trên một số tác vụ phức tạp. Rủi ro bảo mật: 1/4 agent config mã nguồn mở chứa lỗ hổng nghiêm trọng. NLH dễ bị Prompt Injection vì hệ thống coi văn bản là hiến chương tuyệt đối. Nguồn tham khảo: Video gốc: Rethinking AI Agents: The Rise of Harness Engineering Link:    • Rethinking AI Agents: The Rise of Harness ...   Kênh gốc: (không rõ tên kênh) Thông tin AIVN360: Ngày tạo audio NotebookLM: 2026-04-17 Topic: AI Agents Từ khóa: Kỹ thuật Harness, Harness Engineering, Tác nhân AI, Natural Language Harness, MetaHarness, SWE Bench, tối ưu hóa agent Định dạng: AI audio discussion / NotebookLM-generated discussion, được biên tập và trực quan hóa bởi AIVN360. #AIVN360 #AIAgent #HarnessEngineering #TácNhânAI #NotebookLM