Những gì thực sự trong rack
Hai thế hệ CPU, không có thế hệ thứ ba. Bộ nhớ tự sửa lỗi trên dòng mà điều đó quan trọng, NVMe enterprise trong các cặp nhân đôi với một ổ dự phòng nhàn rỗi bên cạnh, và ba ngày burn-in trước khi một node được phép gặp khách hàng.
Hai thế hệ, và không có gì cũ hơn
Hầu hết các nhà cung cấp vận hành ba hoặc bốn thế hệ cùng lúc và bán chúng với cùng một mức giá, đó là lý do tại sao hai máy chủ có thông số giống hệt nhau có thể chênh lệch tới bốn mươi phần trăm khi chạy cùng một khối lượng công việc. Chúng tôi giữ cho đội máy hẹp hơn để tránh điều đó.
Không có thiết bị nào trong môi trường production lạc hậu hơn một thế hệ so với hiện tại. Quy tắc này được giữ từ năm 2022.
Ryzen 9 9950X, Zen 5
16 nhân, 32 luồng, xung nhịp tối đa 5.7 GHz. Đây là luồng đơn nhanh nhất chúng tôi có thể mua, và tốc độ luồng đơn vẫn là yếu tố quyết định mức độ nhanh chóng một yêu cầu được hoàn thành trên hầu hết các ứng dụng thực tế.
EPYC 9354P, Zen 4
32 nhân và 64 luồng trên một socket, mười hai kênh bộ nhớ, ECC có ghi lại. Khi số nhân, dung lượng bộ nhớ và hành vi NUMA có thể dự đoán được quan trọng hơn xung nhịp đỉnh, linh kiện này là lựa chọn tối ưu.
Một socket nếu có thể
Truy cập bộ nhớ liên socket là một vách đá độ trễ mà bạn không thể tinh chỉnh để vượt qua. Chỉ có cấu hình bare-metal lớn nhất mới dùng hai socket, và nó dùng hai socket vì khách hàng yêu cầu cụ thể 64 nhân.
Nhân được cấp một lần
Một nhân bán cho bạn được lập lịch riêng cho bạn. Không có burst credit, không có tỷ lệ oversubscription, không có steal time xuất hiện dưới tải và biến mất trước khi bạn kịp chụp màn hình.
Tại sao không dùng silicon máy chủ mới nhất
Các dòng Zen 5 cho máy chủ đang ở trong phòng thí nghiệm, không phải trong hạ tầng. Khi chúng thay thế 9354P, điều này sẽ xuất hiện trên changelog với ngày di dời, thay vì là một cụm từ trên trang chủ sáu tháng trước khi ai đó có thể mua.
Bộ nhớ, và nơi ECC thực sự tồn tại
Lỗi bộ nhớ không hiếm; chúng chỉ vô hình cho đến khi một thứ quan trọng trở nên sai một cách tinh vi. Trên dòng máy chủ, mọi lỗi đều được sửa và ghi lại.
Nút EPYC có mười hai mô-đun ECC DDR5-4800 có đăng ký, một mô-đun cho mỗi kênh, tất cả đều được lấp đầy. Việc lấp đầy mọi kênh không phải về dung lượng, mà là về băng thông: một bus bộ nhớ lấp đầy một nửa trên chip 32 nhân là một nút thắt cổ chai mà bạn sẽ cảm nhận trên bất cứ thứ gì truy cập RAM một cách nhanh chóng.
Nút Ryzen chạy DDR5-5600 không có ECC, vì nền tảng tiêu dùng không cung cấp nó dưới dạng mà chúng tôi có thể tin cậy. Điều đó được nêu rõ ở đây thay vì giấu kín: nếu khối lượng công việc của bạn cần sửa lỗi, dòng EPYC bắt đầu từ 89 euro và tồn tại chính xác vì lý do đó.
Số lỗi có thể sửa được đếm
Một thanh nhớ tạo ra hơn một vài lần sửa trong một ngày sẽ bị gắn cờ, và mô-đun được thay trong cửa sổ bảo trì tiếp theo cho dù có gì bất thường hay không.
Lỗi không sửa được làm cạn kiệt nút
Các phiên bản di chuyển đi, nút rời khỏi nhóm, và DIMM được thay thế trước khi nó trở lại. Bạn có thể thấy một lần di chuyển trực tiếp; bạn không nên thấy một vụ sụp đổ.
Không ballooning, không trộn trang
Bộ nhớ được cấp phát một lần và không bị đếm hai lần. Việc trộn cùng một trang đã tắt trên toàn bộ hệ thống, vì nó là một kênh phụ giữa các khách thuê và là một tuyên bố hiệu suất biến mất dưới tải thực.
Dung lượng mỗi nút là hào phóng có chủ đích
Một nút EPYC có đủ bộ nhớ để gói lớn nhất mà nó lưu trữ vẫn còn một không gian trống. Các nút chứa đầy đến gigabyte cuối cùng không có nơi nào để di chuyển khi một hàng xóm phải di chuyển.
NVMe, độ bền và bản sao không làm gì cả
Mỗi ổ đĩa là một bộ phận enterprise Gen4 có bảo vệ mất điện, là một cụm tụ điện hoàn thành việc ghi mà nó đã xác nhận khi điện đi giữa lúc làm sạch.
Một bản sao dự phòng nóng cho mỗi nút, nhàn rỗi, chờ đợi. Đó là bảo hiểm rẻ nhất trong tòa nhà.
Cặp nhân bản, luôn luôn
Đọc được trải đều trên cả hai nửa; ghi được xác nhận từ bộ nhớ cache được bảo vệ và đặt trên cả hai. Một lỗi ổ đĩa làm thay đổi một chút hồ sơ hiệu suất và thay đổi tính khả dụng của bạn không chút nào.
Một ổ dự phòng nóng cho mỗi nút
Mỗi node có một ổ đĩa để trống và không hoạt động. Khi một nửa của mirror gặp sự cố, ổ dự phòng sẽ tự động thay thế và quá trình rebuild bắt đầu trước khi bất kỳ ai đọc cảnh báo.
Dư địa độ bền, không phải giới hạn độ bền
Các nút chung sử dụng ổ đĩa loại 1 DWPD; các nút lưu trữ sử dụng 3 DWPD cho tầng ghi. Ổ đĩa được thay thế ở tám mươi phần trăm độ bền định mức thay vì chạy đến con số trên bảng dữ liệu.
Không có ổ đĩa tiêu dùng ở bất kỳ đâu
Không có trong tầng cache, không có trong tầng bulk, không có trong node nào đó được dựng nhanh vào năm 2021 rồi bị lãng quên. NVMe tiêu dùng nhanh trong mười một giây rồi không nhanh nữa — đó là sự đánh đổi hợp lý trên laptop.
Dung lượng được cấp phát, không phải hứa hẹn
Lưu trữ không được thin-provisioned giữa các tenant. Nếu gói dịch vụ nói 800 GB, thì 800 GB tồn tại trên node đó với tên bạn, và không ai khác có thể mở rộng vào đó được.
Mỗi lớp node có gì
Năm lớp node đảm nhiệm năm dòng sản phẩm. Lưu trữ bulk trên lớp S là SATA doanh nghiệp phía sau tầng ghi NVMe — đó là phương tiện quay duy nhất trong toàn bộ hạ tầng.
| Lớp | CPU | Bộ nhớ | NVMe | Mạng | Nguồn |
|---|---|---|---|---|---|
| R — Ryzen NVMe | Ryzen 9 9950X, 16C/32T | 128 GB DDR5-5600 | 2 × 3,84 TB mirrored, 1 dự phòng | 2 × 10 GbE, LACP | 2 × 800 W, A và B |
| E — EPYC High-Memory | EPYC 9354P, 32C/64T | 12 × DDR5-4800 ECC RDIMM | 4 × 3,84 TB mirrored, 1 dự phòng | 2 × 25 GbE, LACP | 2 × 1200 W, A và B |
| G — GPU | EPYC 9354P, 32C/64T | 256 GB ECC DDR5-4800 | 4 × 3,84 TB mirrored, 1 dự phòng | 2 × 40 GbE, LACP | 2 × 2000 W, A và B |
| S — Lưu trữ | EPYC 9354P, 32C/64T | 128 GB ECC DDR5-4800 | 2 × 3,84 TB tầng ghi, SATA bulk phía sau | 2 × 25 GbE, LACP | 2 × 1200 W, A và B |
| BM — Bare Metal | Ryzen 9950X, hoặc một hoặc hai EPYC 9354P | 128 GB đến 1 TB | Lên đến 8 × 7,68 TB | 10 đến 40 GbE | 2 × 1200 W, A và B |
Node GPU truyền toàn bộ card vật lý qua PCIe 4.0 x16 mà không chia sẻ thời gian, đó là lý do con số nguồn như vậy. Hai card trong cùng một instance nằm trên cùng một NUMA node, vì chia chúng qua các socket sẽ tốn kém hơn lợi ích mà card thứ hai mang lại.
Nguồn điện, và hệ thống quản lý không nằm trên internet
Hai bản sao của tất cả những gì có thể nhân đôi, và một mạng quản lý chưa từng có tuyến đường ra thế giới bên ngoài.
Nguồn A và B, đường dẫn riêng biệt
Hai bộ nguồn trên mỗi node trên hệ thống phân phối độc lập, mỗi bộ đủ để gánh toàn bộ máy. Mất một nguồn chỉ là sự kiện được ghi lại và không gì khác, và chúng tôi chứng minh điều đó trên mỗi node trong quá trình burn-in.
Ắc quy, rồi máy phát
Ắc quy bao phủ quá trình chuyển đổi; máy phát bao phủ phần còn lại. Việc chuyển đổi được kiểm tra theo lịch trình tại mỗi địa điểm, và một địa điểm không vượt qua bài kiểm tra sẽ không nhận node mới cho đến khi vượt qua.
Không trích dẫn số liệu cấp độ
Các cấp độ thuộc về tòa nhà và nhà vận hành đã yêu cầu chúng, không phải thuộc về người thuê lặp lại một con số trong tài liệu tiếp thị. Điều chúng tôi sẽ cho bạn biết, tại mỗi địa điểm, là cấu trúc liên kết nguồn cấp và kết quả kiểm tra chuyển đổi dự phòng gần nhất.
Kênh quản trị ngoài băng tần trên VLAN riêng
Các giao diện quản lý không có tuyến công khai và chưa từng có. Truy cập đi qua một đường hầm xác thực, được ghi log và bạn cũng có thể truy cập cùng chúng tôi.
Bao gồm bảng điều khiển, miễn phí
Serial và VNC đến máy chủ của bạn thông qua đường hầm đó. Nó hoạt động khi cấu hình mạng của bạn không hoạt động, đó là lúc duy nhất mọi người muốn sử dụng nó.
IPMI trên máy vật lý, thông tin đăng nhập theo kỳ hạn
Khách hàng máy chủ riêng nhận IPMI qua VPN với điều khiển nguồn, thứ tự khởi động và phương tiện ảo. Thông tin đăng nhập được xoay vòng khi kỳ hạn kết thúc và phần sụn của bộ điều khiển được vá theo lịch trình của chúng tôi, không phải của bạn.
Kiểm tra khả năng chịu tải: ba ngày trước khi tiếp xúc với khách hàng
Khoảng một trong chín nút trượt một cái gì đó trong lần đầu tiên. Gần như luôn là một thanh DIMM.
- 01
Phần sụn về một phiên bản chuẩn đã biết
Phần sụn hệ thống, bộ điều khiển, mạng và ổ đĩa được cố định về phiên bản nhóm máy chủ đang chạy trước khi bất kỳ kiểm tra nào được phép bắt đầu. Một nút được kiểm tra trên phần sụn sai đã không kiểm tra điều gì hữu ích.
- 02
Bộ nhớ, kỹ lưỡng
Nhiều lần chạy đầy đủ trên mọi mô-đun đã lắp đặt, hàng giờ thay vì vài phút. Giai đoạn này bắt gặp hầu hết những gì kiểm tra chịu tải bắt gặp, và đó là lý do lịch trình được tính bằng ngày.
- 03
Ngâm nhiệt
Mọi nhân chạy hết tải trong sáu giờ với cửa hút ở cuối dải nhiệt độ. Chúng tôi theo dõi sự suy giảm của xung nhịp tăng cường duy trì, không chỉ nhiệt độ, bởi vì một nút điều chỉnh nhiệt ở giờ thứ năm sẽ làm điều đó với bạn ở tháng thứ ba.
- 04
Xác minh toàn bộ bề mặt lưu trữ
Mỗi ổ được ghi từ đầu đến cuối, đọc lại và so sánh. Các chỉ số SMART ở cuối giai đoạn này trở thành cơ sở để đánh giá ổ trong suốt thời gian còn lại của nó.
- 05
Tốc độ đường truyền, cả hai hướng cùng lúc
Mọi cổng được đẩy lên công suất tối đa theo cả hai hướng trong một giờ, với việc kiểm tra bộ đếm phía switch về các lỗi mà máy chủ sẽ không bao giờ nhận thấy.
- 06
Rút một nguồn, sau đó rút nguồn kia
Một nguồn được rút ra, khôi phục, sau đó làm tương tự với phía còn lại. Bất kỳ nút nào dù chỉ nhấp nháy đều không được đưa vào vận hành.
- 07
Một ngày yên tĩnh trong nhóm máy chủ
Hai mươi bốn giờ trong hệ thống giám sát mà không mang bất kỳ máy khách nào. Sau đó nó bắt đầu tiếp nhận khách hàng.
Tổng thời gian khoảng 72 giờ. Đó cũng là lý do tại sao kho hàng tại một địa điểm mới xuất hiện theo lô chứ không phải từng cái một: một giá rack đến, và ba ngày sau tất cả đều có sẵn cùng một lúc.
Khi một ổ bắt đầu hỏng
Ổ đĩa thường không chết đột ngột. Chúng thông báo trước nhiều ngày qua các bộ đếm mà không ai đọc, đó là lý do tại sao chúng tôi đọc bộ đếm mỗi năm phút.
- 01
Ngưỡng, không phải điếu văn
Lỗi truyền thông, sector thay thế, mức mài mòn và độ trễ bất thường được lấy mẫu liên tục. Một ổ vượt qua bất kỳ ngưỡng nào sẽ được đánh dấu để thay thế trong khi nó vẫn hoạt động hoàn toàn tốt.
- 02
Ổ dự phòng hoạt động trước
Ổ dự phòng nóng được đưa vào mirror trước khi ổ được đánh dấu bị gỡ ra, để cặp ổ không bao giờ chạy như một bản sao duy nhất trong khi chờ kỹ thuật viên.
- 03
Chạy lại, làm chậm có chủ đích
Một mirror 3,84 TB có thể chạy lại trong khoảng bốn mươi phút ở tốc độ tối đa. Chúng tôi chạy chậm hơn, khoảng hai giờ, bởi vì chạy lại ở tốc độ tối đa không thể phân biệt với một sự cố hiệu suất đối với các máy khách trên nút đó.
- 04
Bạn được thông báo, và không có gì khác thay đổi
Một ghi chú xuất hiện trên trang máy chủ. Không khởi động lại, không di chuyển máy, không cửa sổ bảo trì và không ticket nào bạn phải trả lời.
- 05
Ổ đĩa được tiêu hủy tại chỗ
Các ổ đĩa lỗi và đã ngừng sử dụng được tiêu hủy tại chỗ thay vì trả lại để nhận tín dụng bảo hành. Tín dụng đó không đáng giá bằng sự chắc chắn.
Mirror là dự phòng, không phải sao lưu. Nó bảo vệ bạn khỏi lỗi ổ đĩa, không phải khỏi di trú sai hoặc xóa nhầm. Snapshot có giá năm euro cho năm slot, và sao lưu ngoài node chín euro mỗi 500 GB, được ghi vào một trang web khác với instance.
Câu hỏi về phần cứng
Không. Các node Ryzen chạy DDR5-5600 không ECC, chúng tôi muốn nói rõ điều đó ở đây thay vì để bạn phát hiện ra từ bảng dữ liệu sau này. Bất cứ điều gì mà lỗi bộ nhớ âm thầm là không thể chấp nhận được nên thuộc về EPYC.
Có, và bạn có thể kiểm tra được. Chạy benchmark đơn luồng liên tục lúc ba giờ sáng và lại vào giờ cao điểm; các con số không được thay đổi. Nếu chúng thay đổi, hãy mở ticket, vì có gì đó không ổn và chúng tôi muốn biết.
Không theo tên, nhưng bạn có thể yêu cầu chống phân tán (anti-affinity): hai instance của bạn được đặt trên các node, switch và nguồn điện riêng biệt. Điều này không tốn phí và chỉ cần một ticket.
Nơi công việc cho phép, các instance sẽ live-migrate và bạn thấy một vài trăm mili giây tạm dừng. Nếu không, bạn sẽ nhận được thông báo trước ít nhất năm ngày, với một khoảng thời gian bạn có thể dời một lần nếu thời điểm không phù hợp với bạn.
Không. Cores, bộ nhớ và NVMe được cấp phát một lần cho mỗi thứ. Tài nguyên dùng chung duy nhất là uplink, đó là lý do tại sao con số sử dụng hợp lý được công bố thay vì ngụ ý.
Mọi node trong sản xuất đều chạy Zen 4 hoặc Zen 5. Thế hệ trước cuối cùng đã rời khỏi đội ngũ vào năm 2022, và không có gì được bán trên silicon cũ hơn kể từ đó.
Cùng phần cứng, ba mươi bốn thành phố
Thông số node không thay đổi theo lá cờ trên tòa nhà. Chọn khu vực pháp lý và độ trễ bạn muốn, sau đó chọn kích thước.