Đáp án sai vẫn học được? Cách AI học đi từng bước với công cụ
Hàn Lâm Bình Dân
0:00 / 0:00
Đáp án sai vẫn học được? Cách AI học đi từng bước với công cụ
23 просмотра · 5 дней назад
Hàn Lâm Bình Dân
26 подписчиков
23 просмотра · 5 дней назад
Nhờ AI lên kế hoạch 3 ngày ở Đà Lạt nghe thì đơn giản, nhưng đó là cả một chuỗi việc nối nhau: chỉ sai một bước từ đầu, cả chuyến đi có thể đổ bể. Tập 5 của series "Đơn giản hóa AI" giới thiệu ba kỹ năng giúp AI làm tốt việc nhiều bước: nhìn trước nước đi như kỳ thủ cờ (tìm kiếm dạng cây LATS), làm nhiều việc cùng lúc như đầu bếp giỏi (suy luận song song), và học đi từng bước cho đúng khi dùng công cụ (SWiRL).
📌 Mục lục
00:00 Nhờ AI lên kế hoạch du lịch Đà Lạt
00:16 Nhiệm vụ dài: sai một bước, đổ cả chuỗi
00:26 Ba thứ cần cho nhiệm vụ nhiều bước
00:44 Ba kỹ năng của tập này
01:03 Kỹ năng 1: LATS, tìm kiếm dạng cây
01:18 Mượn ý tưởng từ AlphaGo
01:32 Ví dụ: tìm lối ra khỏi mê cung
01:48 Chấm điểm từng hướng đi
02:02 Đi đến cùng và truyền kết quả ngược lên
02:22 Thỉnh thoảng thử quán mới
02:37 Tự rút kinh nghiệm sau mỗi lần thử
02:49 Kết quả: từ 32% lên 71%
03:05 Hai cái giá của tìm kiếm dạng cây
03:20 Kỹ năng 2: nghĩ song song
03:34 Nhiều đoạn suy nghĩ không phụ thuộc nhau
03:44 Đầu bếp vụng và đầu bếp giỏi
03:58 Người lập kế hoạch và người thực thi
04:14 Dùng AI tạo dữ liệu để dạy AI
04:38 Kết quả: nhanh hơn mà còn đúng hơn
04:52 Áp dụng sang bài toán khác
05:06 Kỹ năng 3: học đi từng bước với công cụ
05:20 Dùng công cụ thật khi huấn luyện rất phiền
05:31 Bước 1: tạo dữ liệu trước một lần
05:46 Bước 2: chấm điểm từng bước
05:59 Bước 3: học tăng cường từng bước
06:16 Bước đúng dù đáp án sai vẫn đáng học
06:32 Học tra cứu, giỏi cả toán
06:48 Một kỹ năng tổng quát
07:03 Học tăng cường hơn học bắt chước
07:29 Quay lại chuyến đi Đà Lạt
07:41 Lập kế hoạch giỏi là gì?
📚 Nguồn tham khảo
A. Zhou và cộng sự (2024), Language Agent Tree Search (LATS), Đại học Illinois Urbana-Champaign
Nghiên cứu suy luận song song của Đại học Stanford (2025): mô hình 7 tỷ tham số học cách tách việc lập kế hoạch và thực thi để chạy song song
A. Goldie và cộng sự (2025), SWiRL: Synthetic Data Generation & Multi-Step Reinforcement Learning, Stanford và Google DeepMind
DeepSeek-AI (2025), DeepSeek-R1
▶️ Tập 1: Từ cỗ máy đoán chữ đến tác tử AI • AI tự giỏi lên bằng cách nào? Từ đoán chữ ...
▶️ Tập 2: Số đông có luôn đúng? • Số đông có luôn đúng? Cách AI tìm 3 lời gi...
▶️ Tập 3: Đáp số đúng mà vẫn sai? • Đáp số đúng mà vẫn sai? Cách dạy AI chấm b...
▶️ Tập 4: AI có 3 người thầy? • AI có 3 người thầy? Cách AI tự giỏi lên nh...
▶️ Trọn series Đơn giản hóa AI: • Đơn Giản Hóa AI
ℹ️ Video mang tính giáo dục, giải thích các ý tưởng nghiên cứu về AI bằng ngôn ngữ dễ hiểu; số liệu dẫn theo các công bố nêu trên, có thể đã được cập nhật. Video không quảng cáo cho sản phẩm AI nào. Video có sẵn phụ đề tiếng Việt trong hình.
Video có sử dụng công cụ AI hỗ trợ hình ảnh/âm thanh. Kịch bản và biên tập: Hàn Lâm Bình Dân.
#AI #TríTuệNhânTạo #HànLâmBìnhDân