HomeCông NghệAMD EPYC tối ưu hạ tầng máy chủ cho trí tuệ nhân...

AMD EPYC tối ưu hạ tầng máy chủ cho trí tuệ nhân tạo Agentic

Published on

Dòng vi xử lý AMD EPYC cung cấp hiệu năng CPU cấp độ tủ máy chủ vượt trội, đáp ứng yêu cầu vận hành hệ thống trí tuệ nhân tạo Agentic.

Nhu cầu hạ tầng CPU cho hệ thống trí tuệ nhân tạo Agentic

Trí tuệ nhân tạo Agentic đang làm thay đổi cấu trúc hạ tầng điện toán. Khi các doanh nghiệp chuyển dịch từ giai đoạn thử nghiệm sang vận hành hệ thống thực tế, nền tảng CPU đóng vai trò quyết định. Mọi tác vụ của hệ thống, bao gồm dịch vụ điều phối, cơ sở dữ liệu, giao diện web, bộ nhớ đệm, phần mềm trung gian và API đều yêu cầu khả năng mở rộng hiệu quả.

4925450 epyc teaser result MMOSITE - Thông tin công nghệ

Những dịch vụ này phụ thuộc hoàn toàn vào sức mạnh CPU và tỷ lệ thuận với số lượng tác vụ xử lý đồng thời thay vì kích thước của một mô hình học máy đơn lẻ. Khách hàng doanh nghiệp không triển khai hệ thống dựa trên các điểm số chuẩn hóa đơn lẻ. Họ triển khai các tủ máy chủ bị giới hạn bởi định mức tiêu thụ điện, công suất tản nhiệt, diện tích mặt sàn và khả năng tương thích phần mềm.

Do đó, dung lượng thực tế của một hệ thống máy chủ được xác định bằng khối lượng công việc hữu ích có thể xử lý gọn bên trong một tủ mạng tiêu thụ mức điện năng 100 kW. Tại lớp dịch vụ này, năng lực xử lý đa dụng của CPU chính là yếu tố thiết lập giới hạn hoạt động tối đa cho nền tảng trí tuệ nhân tạo.

Ưu thế hiệu năng của AMD EPYC trên quy mô tủ máy chủ

Dựa trên tiêu chí đánh giá cấp độ tủ máy chủ, bộ xử lý AMD EPYC thể hiện sự vượt trội rõ rệt. Trong kịch bản tủ mạng 100 kW được mô phỏng sử dụng nền tảng máy chủ hai chân cắm, vi xử lý AMD EPYC 9965 mã Turin sở hữu 192 lõi cung cấp thông lượng cao gấp 2,37 lần so với mốc tiêu chuẩn của hệ thống 88 lõi NVIDIA Vera.

Horizontal bar chart: Normalized rack performance within 100kW budget. AMD EPYC 3.30, AMD EPYC 9965 2.37, Intel Xeon 6980P 1.46, NVIDIA Vera 1.0.

Khi so sánh với phiên bản 128 lõi Intel Xeon 6980P, đại diện từ AMD ghi nhận mức hiệu suất nhỉnh hơn khoảng 1,6 lần. Kiến trúc này duy trì ưu thế trên nhiều khối lượng công việc thực tế như điện toán đa dụng, máy chủ Java, phản hồi web, lưu trữ khóa-giá trị, bộ nhớ đệm và cơ sở dữ liệu quan hệ. Đáng chú ý, thế hệ vi xử lý AMD EPYC mã Venice sắp ra mắt với 256 lõi được dự báo sẽ nới rộng khoảng cách hiệu năng lên mức 3,30 lần so với kiến trúc của NVIDIA.

Table 1: Server CPU Rack Configuration Summary. Compares NVIDIA VERA, Intel Xeon GNR-AP 6980P, AMD EPYC (Turin) 9965, and AMD EPYC (Venice). Data includes cores per socket (88-256), normalized core per socket (1.0-2.90), normalized 2P system power (1.0-1.41), normalized nodes per rack (1.0-0.71), and a consistent 100 kW rack power budget.

Sự gia tăng mật độ lõi vi xử lý bên trong một giới hạn điện năng cố định kéo theo sự gia tăng của tổng thông lượng dịch vụ. Đối với các tầng giao dịch và phần mềm trung gian bao quanh hệ thống Agentic, điều này đồng nghĩa với mức độ đáp ứng cao hơn trên mỗi thiết bị, quyết định số lượng tác vụ nền tảng có thể duy trì cùng lúc.

Mật độ lõi tính toán và nền tảng tương thích hiện hành

Mật độ thiết bị trên mỗi tủ máy chủ đã trở thành thước đo hàng đầu phản ánh giá trị triển khai thực tế của hệ thống phần cứng. Hiện tại, một cụm máy chủ sử dụng vi xử lý AMD EPYC Turin tích hợp trong khung máy Dell PowerEdge IR7000 hoặc các hệ thống tản nhiệt bằng chất lỏng tương đương có thể cung cấp hơn 27.000 lõi CPU trên mỗi tủ mạng.

Nền tảng kiến trúc Venice thế hệ tiếp theo được thiết kế để mở rộng giới hạn này vượt mốc 36.000 lõi. Quan trọng hơn, hạ tầng này đang sẵn sàng phục vụ khách hàng ngay thời điểm hiện tại dựa trên các chuẩn x86 thương mại.

Table 3: Rack Density Comparison. NVIDIA Vera (88C x 2P) has 22,500 cores/sandboxes per rack. AMD EPYC Turin (192C x 2P) has >27,000. AMD EPYC Venice (256C x 2P) has >36,000.

Hệ thống vận hành trơn tru với hệ sinh thái phần mềm hiện có của doanh nghiệp, giúp loại bỏ yêu cầu thiết kế lại cấu trúc tủ mạng, giảm thiểu rủi ro khi di chuyển dữ liệu và rút ngắn thời gian đưa vào ứng dụng thực tế. Bên cạnh hiệu quả điện năng trên quy mô lớn, hiệu suất trên mỗi lõi đơn cũng là một tiêu chí kỹ thuật trọng yếu đối với các tác vụ phân tích và cơ sở dữ liệu.

AMD ước tính dòng CPU Venice 64 lõi sẽ mang lại lợi thế hiệu suất lõi đơn cao hơn 27% so với vi mạch 88 lõi của đối thủ. Ngay cả ở cấu hình 96 lõi, phiên bản Venice vẫn được kỳ vọng đạt hiệu suất trên mỗi lõi cao hơn 11%. Việc cân bằng giữa mật độ điện toán, tính liên tục của hệ sinh thái phần mềm và khả năng triển khai ngay lập tức giúp AMD củng cố vị thế trên thị trường linh kiện máy chủ thế hệ mới.

tin mới nhất

Kingmax: Chặng Cuối Của An Ninh Mạng Doanh Nghiệp

Đối với Kingmax kỷ nguyên chuyển đổi số và kết nối vạn vật, các...

Chip A20 trên iPhone 18 tiêu chuẩn sẽ sử dụng tiến trình 18A của Intel

Intel từng được nhắc đến như là lựa chọn xưởng đúc thứ hai của...

GIGABYTE trang bị tấm nền LG Tandem WOLED 280Hz cho dòng AORUS Elite

Thị trường màn hình OLED đang chứng kiến sự cạnh tranh khốc liệt hơn...

AMD mở rộng công nghệ FSR 4.1 cho dòng card đồ họa Radeon RX 7000

Jack Huynh vừa chính thức thông báo việc tích hợp công nghệ nâng cấp...

GIGABYTE AORUS RTX 5080 INFINITY và INFINITY WOOD chính thức lên kệ

Dòng card đồ họa GIGABYTE INFINITY dành cho mẫu GPU mạnh thứ hai của...

tin liên quan

AMD mở rộng công nghệ FSR 4.1 cho dòng card đồ họa Radeon RX 7000

Jack Huynh vừa chính thức thông báo việc tích...

AMD và Intel “vũ trang” ACE cho CPU AI x86 sắp ra mắt

Báo cáo kỹ thuật mới nhất của ACE (AI...

AMD bổ nhiệm ông Vinay Awasthi làm Phó Chủ tịch Cấp cao

AMD, tập đoàn dẫn đầu trong lĩnh vực điện...

AMD kéo dài vòng đời nền tảng AM5 đến năm 2029

AMD xác nhận kéo dài vòng đời nền tảng...

AMD ra mắt card đồ họa Radeon RX 9070 GRE cạnh tranh với RTX 5060 Ti

AMD chính thức giới thiệu mẫu card đồ họa...