Mô hình sinh quy mô lớn đầu tiên sử dụng vật lý làm nguyên thủy tính toán Un-0 đã ra mắt, có thể giảm mức tiêu thụ năng lượng AI xuống 1000 lần?
Trong bối cảnh AI ngày càng tiêu thụ năng lượng lớn, startup Unconventional AI của Naveen Rao vừa công bố mô hình tạo ảnh Un-0, được cho là mô hình tạo sinh quy mô lớn đầu tiên sử dụng hiện tượng vật lý làm nguyên thủy tính toán.
Un-0 hoạt động dựa trên một hệ thống hàng nghìn "bộ dao động" (oscillator) kết hợp với nhau, mô phỏng các hệ cơ học như đồng hồ tích tắc. Thay vì tính toán số thuần túy, mô hình để các bộ dao động này tương tác và tiến hóa theo các quy luật vật lý (được mô tả bởi phương trình Kuramoto) để tạo ra hình ảnh. Quá trình tạo ảnh gồm: khởi tạo ngẫu nhiên các pha dao động, đưa thông tin điều kiện (nhãn lớp), để hệ vật lý tự vận hành, chụp trạng thái tại thời điểm T, và cuối cùng giải mã thành pixel ảnh.
Trên bộ dữ liệu ImageNet 64x64, Un-0 đạt điểm FID 6.74, ngang bằng với một số mô hình tạo ảnh truyền thống thế hệ đầu, dù chưa bằng các mô hình hiện đại nhất. Mục tiêu lớn nhất của hướng nghiên cứu này là nâng cao hiệu suất năng lượng. Công ty kỳ vọng, khi được triển khai trên phần cứng chuyên dụng (như mạch CMOS), cách tiếp cận tính toán bằng vật lý này có thể giảm tiêu thụ năng lượng cho AI xuống 1.000 lần so với kiến trúc dựa trên GPU truyền thống, bằng cách giảm thiểu việc di chuyển dữ liệu và tận dụng bản chất tính toán sẵn có của các quá trình động lực học.
marsbit06/26 10:56
