arXiv 2610.17860
Socratic Skill Learning: Xen kẽ giảng dạy và thực hành để học các kỹ năng tác tử có thể chuyển giao
Socratic Skill Learning: Interleaving Teaching and Practice for Transferable Agent Skills
AI32 lượt đề xuất
Tác giả: Letian Zhu, Han Li, Yifan Yao, Xinping Lei, Xinyu Che, Jiahao Wang, Dianyi Wang, Yucheng Fu +4
Tổng quan
Các tác giả đề xuất Socratic Skill Learning (SSL), trong đó Educator hướng dẫn quá trình khám phá còn Student thực hành, kiểm thử và tự viết Skill. Họ đánh giá trên SkillTransferBench, gồm 35 họ tác vụ và 408 trường hợp có thể thực thi, với đánh giá held-out trong các phiên solver mới. Biến thể Issue-Guided SSL theo dõi các câu hỏi chưa giải quyết qua các lần sửa Skill để chọn và tập trung việc ôn tập.
Giới thiệu
Một lần thực hiện tác vụ thành công có thể để lại các điều kiện sử dụng của quy trình chưa được kiểm chứng, nên Skill thu được có thể không chuyển giao sang tác vụ mới. Vì vậy, học Skill có thể chuyển giao cần bằng chứng về cả quy trình lẫn thời điểm áp dụng nó.
Kết quả
Trên nhóm chính gồm 155 trường hợp, Fixed-Window SSL đạt utility 0.801, so với 0.723 khi không có Skill, 0.761 với Trace2Skill đã điều chỉnh và 0.751 với SKILL-KD đã điều chỉnh. Issue-Guided SSL đạt utility 0.805 nhưng dùng ít hơn 61.7% token của Educator và ít hơn 16.9% tổng token học.
Kết luận
Kết hợp hướng dẫn của chuyên gia với thực hành của học viên và tập trung ôn tập vào các câu hỏi còn mở giúp tạo ra các Skill tác tử chuyển giao tốt hơn với chi phí giảng dạy thấp hơn.