AMD EPYC tối ưu hạ tầng máy chủ cho trí tuệ nhân tạo Agentic

Published on

Quảng cáo

Dòng vi xử lý AMD EPYC cung cấp hiệu năng CPU cấp độ tủ máy chủ vượt trội, đáp ứng yêu cầu vận hành hệ thống trí tuệ nhân tạo Agentic.

Nhu cầu hạ tầng CPU cho hệ thống trí tuệ nhân tạo Agentic

Trí tuệ nhân tạo Agentic đang làm thay đổi cấu trúc hạ tầng điện toán. Khi các doanh nghiệp chuyển dịch từ giai đoạn thử nghiệm sang vận hành hệ thống thực tế, nền tảng CPU đóng vai trò quyết định. Mọi tác vụ của hệ thống, bao gồm dịch vụ điều phối, cơ sở dữ liệu, giao diện web, bộ nhớ đệm, phần mềm trung gian và API đều yêu cầu khả năng mở rộng hiệu quả.

4925450 epyc teaser result MMOSITE - Thông tin công nghệ

Những dịch vụ này phụ thuộc hoàn toàn vào sức mạnh CPU và tỷ lệ thuận với số lượng tác vụ xử lý đồng thời thay vì kích thước của một mô hình học máy đơn lẻ. Khách hàng doanh nghiệp không triển khai hệ thống dựa trên các điểm số chuẩn hóa đơn lẻ. Họ triển khai các tủ máy chủ bị giới hạn bởi định mức tiêu thụ điện, công suất tản nhiệt, diện tích mặt sàn và khả năng tương thích phần mềm.

Do đó, dung lượng thực tế của một hệ thống máy chủ được xác định bằng khối lượng công việc hữu ích có thể xử lý gọn bên trong một tủ mạng tiêu thụ mức điện năng 100 kW. Tại lớp dịch vụ này, năng lực xử lý đa dụng của CPU chính là yếu tố thiết lập giới hạn hoạt động tối đa cho nền tảng trí tuệ nhân tạo.

Ưu thế hiệu năng của AMD EPYC trên quy mô tủ máy chủ

Dựa trên tiêu chí đánh giá cấp độ tủ máy chủ, bộ xử lý AMD EPYC thể hiện sự vượt trội rõ rệt. Trong kịch bản tủ mạng 100 kW được mô phỏng sử dụng nền tảng máy chủ hai chân cắm, vi xử lý AMD EPYC 9965 mã Turin sở hữu 192 lõi cung cấp thông lượng cao gấp 2,37 lần so với mốc tiêu chuẩn của hệ thống 88 lõi NVIDIA Vera.

Horizontal bar chart: Normalized rack performance within 100kW budget. AMD EPYC 3.30, AMD EPYC 9965 2.37, Intel Xeon 6980P 1.46, NVIDIA Vera 1.0.

Khi so sánh với phiên bản 128 lõi Intel Xeon 6980P, đại diện từ AMD ghi nhận mức hiệu suất nhỉnh hơn khoảng 1,6 lần. Kiến trúc này duy trì ưu thế trên nhiều khối lượng công việc thực tế như điện toán đa dụng, máy chủ Java, phản hồi web, lưu trữ khóa-giá trị, bộ nhớ đệm và cơ sở dữ liệu quan hệ. Đáng chú ý, thế hệ vi xử lý AMD EPYC mã Venice sắp ra mắt với 256 lõi được dự báo sẽ nới rộng khoảng cách hiệu năng lên mức 3,30 lần so với kiến trúc của NVIDIA.

Table 1: Server CPU Rack Configuration Summary. Compares NVIDIA VERA, Intel Xeon GNR-AP 6980P, AMD EPYC (Turin) 9965, and AMD EPYC (Venice). Data includes cores per socket (88-256), normalized core per socket (1.0-2.90), normalized 2P system power (1.0-1.41), normalized nodes per rack (1.0-0.71), and a consistent 100 kW rack power budget.

Sự gia tăng mật độ lõi vi xử lý bên trong một giới hạn điện năng cố định kéo theo sự gia tăng của tổng thông lượng dịch vụ. Đối với các tầng giao dịch và phần mềm trung gian bao quanh hệ thống Agentic, điều này đồng nghĩa với mức độ đáp ứng cao hơn trên mỗi thiết bị, quyết định số lượng tác vụ nền tảng có thể duy trì cùng lúc.

Mật độ lõi tính toán và nền tảng tương thích hiện hành

Mật độ thiết bị trên mỗi tủ máy chủ đã trở thành thước đo hàng đầu phản ánh giá trị triển khai thực tế của hệ thống phần cứng. Hiện tại, một cụm máy chủ sử dụng vi xử lý AMD EPYC Turin tích hợp trong khung máy Dell PowerEdge IR7000 hoặc các hệ thống tản nhiệt bằng chất lỏng tương đương có thể cung cấp hơn 27.000 lõi CPU trên mỗi tủ mạng.

Nền tảng kiến trúc Venice thế hệ tiếp theo được thiết kế để mở rộng giới hạn này vượt mốc 36.000 lõi. Quan trọng hơn, hạ tầng này đang sẵn sàng phục vụ khách hàng ngay thời điểm hiện tại dựa trên các chuẩn x86 thương mại.

Table 3: Rack Density Comparison. NVIDIA Vera (88C x 2P) has 22,500 cores/sandboxes per rack. AMD EPYC Turin (192C x 2P) has >27,000. AMD EPYC Venice (256C x 2P) has >36,000.

Hệ thống vận hành trơn tru với hệ sinh thái phần mềm hiện có của doanh nghiệp, giúp loại bỏ yêu cầu thiết kế lại cấu trúc tủ mạng, giảm thiểu rủi ro khi di chuyển dữ liệu và rút ngắn thời gian đưa vào ứng dụng thực tế. Bên cạnh hiệu quả điện năng trên quy mô lớn, hiệu suất trên mỗi lõi đơn cũng là một tiêu chí kỹ thuật trọng yếu đối với các tác vụ phân tích và cơ sở dữ liệu.

AMD ước tính dòng CPU Venice 64 lõi sẽ mang lại lợi thế hiệu suất lõi đơn cao hơn 27% so với vi mạch 88 lõi của đối thủ. Ngay cả ở cấu hình 96 lõi, phiên bản Venice vẫn được kỳ vọng đạt hiệu suất trên mỗi lõi cao hơn 11%. Việc cân bằng giữa mật độ điện toán, tính liên tục của hệ sinh thái phần mềm và khả năng triển khai ngay lập tức giúp AMD củng cố vị thế trên thị trường linh kiện máy chủ thế hệ mới.

Tin mới

NVIDIA RTX Spark nhận bản cập nhật Driver đầu tiên

NVIDIA vừa chính thức phát hành bản xem trước đầu tiên của driver hỗ...

Apple tăng giá iCloud+ tại Việt Nam, gói 50 GB tăng mạnh nhất 31,58%

Apple tăng giá iCloud+ tại Việt Nam từ 17/7, lần đầu kể từ tháng 6/2023, với gói 50 GB tăng mạnh nhất 31,58%, nằm trong đợt điều chỉnh giá tại 8 quốc gia.

Intel Nova Lake lộ tên gọi Core Ultra Series 400, ra mắt rải rác đến 2027

Rò rỉ mới cho thấy Intel Nova Lake sẽ mang tên Core Ultra Series 400, ra mắt theo từng đợt từ đầu đến cuối năm 2027, với flagship 52 nhân đến sau cùng.

Garmin Cirqa lại lộ diện, lần này trên chính website của Garmin

Website Romania của Garmin vừa vô tình để lộ tên Cirqa trong mục Health Status, củng cố thêm tin đồn về mẫu smart band không màn hình sắp ra mắt.

AMD dọn đường ra mắt dòng vi xử lý Ryzen AI MAX PRO 400 với bản cập nhật ROCm 7.14

"Đội Đỏ" AMD đã chính thức đặt nền móng cho màn ra mắt của...

Người dùng MacBook tự mài cạnh máy để cổ tay đỡ đau

Nhiều người dùng MacBook chọn cách tự mài giũa cạnh viền sắc của máy bằng giũa kim loại và giấy nhám để giảm khó chịu khi kê cổ tay, dù Apple vốn nổi tiếng khắt khe về thiết kế.

Google AI Mode cho phép kết nối Instacart, Canva, YouTube Music

Google mở rộng AI Mode trong Search, cho phép liên kết Instacart, Canva và YouTube Music để hỗ trợ người dùng hoàn tất tác vụ nhanh hơn.

UGREEN hợp tác Honkai: Star Rail, ra mắt bộ sạc phiên bản giới hạn

UGREEN bắt tay HoYoverse cho ra mắt bộ sạc và phụ kiện lấy cảm hứng từ Honkai: Star Rail, dự kiến trưng bày tại HoYo FEST 2026 ở Đông Nam Á.

ASUS ra mắt BIOS Beta tăng tương thích RAM CXMT cho bo mạch AMD 600/800 series

ASUS phát hành BIOS Beta mới cho loạt bo mạch chủ AMD X670 và X870, cải thiện khả năng tương thích và hiệu năng với RAM DDR5 dùng chip CXMT.

Motorola Edge 70 Max ra mắt: Snapdragon 8 Gen 5, pin 7.100 mAh

Motorola Edge 70 Max trình làng tại Ấn Độ với chip Snapdragon 8 Gen 5, pin silicon-carbon 7.100 mAh và màn hình 144Hz, giá từ 54.999 rupee.

tin liên quan