Elon Musk vừa hoàn thành việc xây dựng một siêu máy tính mới sử dụng 100.000 GPU NVIDIA trong vòng 4 tháng. Siêu máy tính này được đặt tại Memphis, Tennessee và được đặt tên là Colossus.
Musk cho biết trên Twitter rằng Colossus là hệ thống đào tạo AI mạnh nhất thế giới hiện nay. Ông cũng cho biết thêm rằng việc xây dựng siêu máy tính này đã được hoàn thành trong vòng 122 ngày.
Colossus được xây dựng bằng 100.000 GPU NVIDIA H100, một loại GPU mà các công ty công nghệ trên toàn thế giới đang tranh giành để đào tạo các mô hình AI mới. Mỗi GPU H100 có giá khoảng 30.000 USD, cho thấy Musk đã chi ít nhất 3 tỷ USD để xây dựng siêu máy tính này.
Colossus sẽ tiếp tục được mở rộng trong thời gian tới. Musk cho biết trên Twitter rằng cơ sở này sẽ "tăng gấp đôi kích thước lên 200.000" GPU trong vài tháng tới khi thêm 50.000 GPU NVDIA H200, được trang bị bộ nhớ nâng cấp, vào hệ thống.
Musk xây dựng Colossus cho xAI, công ty khởi nghiệp mới của ông, tập trung vào việc tạo ra các công nghệ AI tạo sinh, bao gồm chatbot Grok. Bằng cách kết hợp hàng trăm nghìn GPU với nhau, xAI đang hướng đến việc tăng tốc đào tạo cho Grok và các dự án AI khác.
Tuy nhiên, Colossus có thể không phải là hệ thống đào tạo AI mạnh nhất thế giới, vì các công ty như Meta, Microsoft và OpenAI cũng đang mua hàng trăm nghìn GPU NVIDIA cho các dự án đào tạo AI của riêng họ. Dù sao, Colossus cũng cho thấy tốc độ phát triển nhanh chóng của ngành công nghiệp xây dựng các cơ sở đào tạo AI.
Mặc dù là một thành tựu đáng kể, sự xuất hiện của Colossus cũng đang gây ra những lo ngại về tác động của siêu máy tính này đến môi trường, nguồn nước và lưới điện của Memphis. Một nhóm địa phương cũng đã kêu gọi thành phố điều tra xem liệu các tuabin của cơ sở có nguy cơ tạo ra ô nhiễm không khí hay không. Tuy nhiên, các quan chức thành phố cho biết xAI đã cam kết giúp cải thiện cơ sở hạ tầng địa phương để hỗ trợ siêu máy tính.
