Cerebras Systems vừa ra mắt con chip to nhất thế giới Cerebras CS-2. Tức là nó phải to bằng cả quyển sách giáo khoa luôn mấy bạn ạ.
CS-2 có diện tích die đến tận 46.225 mm2, 2,6 nghìn tỷ bóng bán dẫn và 850.000 nhân được tối ưu hóa để chạy AI. Con chip này được thiết kế để chạy AI model có quy mô đến 120 nghìn tỷ thông số, phức tạp hơn cả bộ não với 100 nghìn tỷ khớp nối thần kinh của chúng ta. Chính vì thế nên nó được Cerebras Systems gọi là giải pháp cho AI quy mô não người đầu tiên trên thế giới. Con chip này có thể hoạt động độc lập hoặc làm việc với tối đa đến 192 chip CS-2 khác trong cùng một hệ thống để tăng cường sức mạnh hơn nữa. Mỗi con chip CS-2 đã được trang bị đến 40GB bộ nhớ SRAM nhưng nó vẫn có thể được trang bị thêm RAM rời bên ngoài để giúp các kỹ sư chạy các AI lớn hơn.
Với 20 petabyte băng thông bộ nhớ và 220 petabit băng thông tổng hợp, việc giao tiếp giữa nhiều chip với nhau là một thách thức công nghệ trong thời điểm hiện tại. Do công suất tính toán bá đạo, con chip to nhất thế giới sinh ra mức nhiệt lượng đến tận 15kW, đòi hỏi các giải pháp tản nhiệt cực mạnh và tinh vi, điều này khiến cho việc nhồi nhét nhiều con chip như thế vào một hệ thống duy nhất là rất khó thực hiện.
Chính vì thế mà Cerebras đã nghiên cứu công nghệ SwarmX Interconnect. Các tham số của AI model sẽ được lưu trên cụm bộ nhớ MemoryX trong khi mô hình AI model vẫn chạy trên chip CS-2. Điều này không chỉ cho phép chạy các AI model khủng nhất từ trước đến nay mà còn giúp giải quyết các vấn đề về độ trễ và băng thông nữa. Cerebras cho biết công nghệ này cho phép hệ thống mở rộng trên tối đa 192 hệ thống con có chip CS-2.
Tóm tắt nội dung:
- Cerebras Systems vừa ra mắt con chip to nhất thế giới Cerebras CS-2, có diện tích die đến tận 46,225 mm2
- Con chip này được thiết kế để chạy AI model có quy mô đến 120 nghìn tỷ thông số, phức tạp hơn cả bộ não với 100 nghìn tỷ khớp nối thần kinh của chúng ta
- CS-2 có thể hoạt động độc lập hoặc làm việc với tối đa đến 192 chip CS-2 khác trong cùng một hệ thống để tăng cường sức mạnh
- Mỗi con chip CS-2 được trang bị đến 40GB bộ nhớ SRAM nhưng nó vẫn có thể được trang bị thêm RAM rời bên ngoài để giúp các kỹ sư chạy các AI phức tạp hơn
Nguồn: Tom’s Hardware
https://gvn360.com/cong-nghe/xuat-h...hoa-va-co-the-chay-ai-phuc-tap-hon-nao-nguoi/
.
