Richard Sutton, Cha đẻ của Học tăng cường 69 tuổi, khởi nghiệp: Xây dựng tác nhân thông minh 20W tương đương não người
Richard Sutton, cha đẻ của học tăng cường và là người đoạt giải Turing 2024, ở tuổi 69 đã cùng cựu sinh viên Khurram Javed rời Keen Technologies của John Carmack để thành lập Oak Lab. Động lực là ông tin rằng các phương pháp học sâu hiện tại thiếu hiệu quả và cần một tư duy nền tảng mới để tiến tới trí tuệ phổ quát (AGI).
Mục tiêu tối thượng của Oak Lab là tạo ra một tác nhân thông minh quy mô nghìn tỷ tham số, có khả năng học tập và lập kế hoạch trong thời gian thực, với mức tiêu thụ năng lượng chỉ 20W – tương đương bộ não con người. Trọng tâm của họ là nguyên tắc "trí thông minh đến từ kinh nghiệm được tạo ra liên tục trong thời gian chạy", trái ngược với các mô hình lớn hiện nay chủ yếu được đào tạo ngoại tuyến trên dữ liệu tĩnh.
Oak Lab sẽ phát triển kiến trúc "OaK" (Options and Knowledge), nhằm giúp tác nhân trích xuất các kỹ năng trừu tượng từ kinh nghiệm, cho phép học tập theo thời gian thực với batch size bằng 1 mà không cần lưu trữ hay phát lại dữ liệu cũ. Lý thuyết này dựa trên "Giả thuyết thế giới lớn" và là bước tiến hóa từ bài học trong tác phẩm "Bài học cay đắng" của Sutton, hướng tới kỷ nguyên AI học chủ yếu từ kinh nghiệm tự sinh thay vì dữ liệu do con người chuẩn bị.
Hành trình này bắt đầu từ luận án tiến sĩ của Sutton về "phân bổ tín dụng thời gian" cách đây 40 năm và vẫn kiên định với câu hỏi cốt lõi: trí thông minh thực sự đến từ đâu. Ông sẽ trình bày chi tiết hơn về tầm nhìn này tại Diễn đàn Nhà tư tưởng WAIC ở Thượng Hải.
marsbit07/14 12:33
