AI Phụ Thuộc Vào Dung Lượng Lưu Trữ Dữ Liệu Lớn

AI Phụ Thuộc Vào Dung Lượng Lưu Trữ Dữ Liệu Lớn

Việc lưu trữ và kích hoạt dữ liệu hàng loạt có vai trò quan trọng đối với làn sóng đổi mới AI tiếp theo.

Để tối đa hóa tiềm năng của AI cần phải có sự cân bằng.

Các nhà phát triển ứng dụng đang chạy đua để đào tạo và triển khai các mô hình AI. Trọng tâm là tìm dữ liệu phù hợp và tăng cường sức mạnh tính toán. Khi các mô hình và ứng dụng AI phát triển mạnh, việc tìm ra cách lưu trữ lượng lớn exabyte mà chúng sẽ tạo ra trở thành một thách thức cấp bách. Hỗ trợ khối lượng công việc AI đòi hỏi sự kết hợp của các công nghệ bộ nhớ và lưu trữ quan trọng trên toàn bộ quy trình làm việc dữ liệu AI. Nhưng cuối cùng, AI ở quy mô lớn đòi hỏi ổ cứng.

Một phổ bộ nhớ và lưu trữ cho phép AI hoạt động.

Cung cấp dữ liệu cần thiết cho AI để học, tạo và cải thiện đòi hỏi nhiều công nghệ lưu trữ. Từ bộ nhớ thông lượng cao đến ổ cứng dung lượng cao, việc xác định hỗn hợp lưu trữ phù hợp cho bất kỳ khối lượng công việc AI nào là về việc cân bằng nhu cầu về hiệu suất, chi phí và khả năng mở rộng.

Hầu hết dữ liệu AI đều được lưu trên ổ cứng.

Các cụm tính toán AI đào tạo, chạy và tối ưu hóa các mô hình ngôn ngữ. GPU, CPU, NPU và TPU được kết hợp chặt chẽ với các thiết bị bộ nhớ hiệu suất cao, cung cấp thông lượng terabyte và thậm chí petabyte mỗi giây cho khả năng tính toán cực đại. Dữ liệu đầu vào và đầu ra mà chúng sử dụng và tạo ra chảy vào các cụm lưu trữ mạng, nơi dữ liệu được lưu trữ lâu dài, chủ yếu trên ổ cứng, để hỗ trợ đào tạo lại trong tương lai, kiểm soát chất lượng và tuân thủ. 

Các trung tâm dữ liệu lớn nhất thế giới đều chọn ổ cứng.

Ngày nay, những nhà cải tiến AI tiên tiến nhất cũng vận hành các trung tâm dữ liệu đám mây và siêu quy mô lớn nhất thế giới. Các công ty này chọn lưu trữ 90% exabyte trực tuyến¹ của họ trên ổ cứng vì họ hiểu được giá trị hiệu suất/giá độc đáo mà ổ cứng mang lại cho bộ lưu trữ dung lượng lớn. Mặc dù SSD cũng là một công nghệ quan trọng, ổ cứng sẽ tiếp tục lưu trữ phần lớn dữ liệu khi nhiều kiến ​​trúc được tối ưu hóa cho AI hơn được triển khai.

Tại sao ổ cứng lý tưởng cho AI ở quy mô lớn.

Sự bùng nổ dữ liệu của kỷ nguyên AI đòi hỏi dung lượng lưu trữ lớn có thể mở rộng. Trong khi ổ đĩa thể rắn (SSD) quan trọng đối với khối lượng công việc có độ trễ thấp, AI ở quy mô lớn chạy trên ổ cứng. Ba yếu tố chính giải thích lý do tại sao.

Lợi thế về quy mô.

Trên cơ sở chi phí cho mỗi TB, ổ cứng hiệu quả hơn 6 lần so với ổ SSD, khiến chúng trở thành lựa chọn hợp lý cho việc xây dựng bộ lưu trữ dữ liệu AI.

Sản xuất exabyte ở quy mô lớn.

Nếu tính theo chi phí vốn, sản xuất ổ cứng hiệu quả hơn ngành công nghiệp NAND gấp 9 lần.

Tính bền vững ở quy mô lớn.

Ổ cứng sử dụng ít hơn 4 lần công suất hoạt động trên mỗi terabyte và có lượng carbon tích hợp ít hơn 10 lần so với ổ SSD.

---