在本文中，我們將告訴您我們的客戶使用戴爾 R730xd 伺服器平台實施了哪些基礎設施解決方案，以及為什麼租賃該平台的價格如此之高 與烏克蘭和俄羅斯有良好的溝通管道，以及 ，已經以一定的價格提供了佈局和連接 已成為現實。 我們將分享基於這些平台的可能的解決方案，使用私人 VLAN、10G 本地網路和 CISCO 的硬體防火牆，並根據要求提供給我們的客戶。 此外，按照最佳傳統，我們將為 Habrahabr 讀者提供免費使用戴爾 R730xd 伺服器的獎勵。
最近，我們收到越來越多的關於建設各種企業基礎設施的請求，不幸的是，這與我們提供非常高品質的解決方案的事實沒有太大關係，而是與這些解決方案的價格和水平有關。荷蘭和美國提供了安全和法治，但遺憾的是，烏克蘭和俄羅斯往往無法做到這一點。 不幸的是，這種解決方案的成本只是“天文數字”，因為“長期資金”的概念對於後蘇聯國家來說原則上是陌生的，在其他風險的背景下或由於缺乏必要的基礎設施和水平認證。
一個很好的例子就是硬體價格的差異。 例如， 戴爾R730xd平台， 為我們的客戶購買的， 基本配置中，2 x Intel Dodeca-Core Xeon E5-2650v4 128GB DDR4 6x480GB SSD 售價約 9000 歐元。 不言而喻，在烏克蘭或俄羅斯租用該伺服器毫無疑問價格低廉，因為租賃成本是基於12-18個月內平台成本的回收。 這意味著，不包括住宿、電力和通訊管道費用的最低可能租金價格將在500-800美元/月的範圍內，具體取決於提供者的風險程度和商業計劃。 您還需要找到一個具有所需認證等級和通訊管道的良好資料中心。 好吧，不要忘記考慮到在某些非法調查行動中非法扣押設備的風險，這些行動可能是由於競爭和在特定地區開展業務的具體情況而引起的。
因此，我們的提案引起了極大的興趣也就不足為奇了，特別是因為我們提供擬議伺服器的資料中心擁有許多對企業部門必要且重要的證書 - , , , и .
現在讓我們來看看初學者和小型專案以及在隔離區或資料中心的辦公室建立解決方案的相當大的系統整合商可能感興趣的幾個案例。
使用 Red Hat Ceph 建置資料倉儲時 Dell R730xd 平台的優勢
眾所周知，資料儲存和處理的需求不斷增長，而且速度不斷加快。 如果幾年前擁有 1TB 儲存空間就足夠了，可提供數百 IOPS，那麼現在需求已增加到數萬 IOPS 和 PB 空間。 這些對容量和效能的需求在一定程度上是由於非結構化資料量的增加而推動的，這些非結構化資料包括音樂、圖像、影片、資料庫備份、日誌檔案和其他檔案、財務和醫療資料（稱為「大數據」的數據）。 更不用說由於互聯網和新的互聯網資源的擴散和擴展而對數據存儲的需求不斷增長。 因此，面對所有這些電力需求，客戶對高可靠性和高性能的期望比以往任何時候都更高。
雖然 IT 公司正在努力解決管理 PB 甚至 EB 資料的問題，但雲端儲存模型在現代資料中心中變得越來越普遍。 越來越多的新軟體系統正在被編寫，允許您以最佳方式配置雲端環境與硬體的交互；Ceph 就是其中之一。
Ceph 是一個開源分散式儲存系統，旨在提供高效能、可靠性和可擴展性。 Ceph在分散式電腦叢集上實作物件存儲，並提供儲存物件、區塊和檔案的介面。 Ceph 提供完全分散式存儲，無單點故障，並且可擴展至 PB 等級。 Ceph 複製數據，從而提供容錯能力。 該系統的設計不僅提供獨立恢復，還提供管理，這有助於避免不必要的維護成本。 由於 Ceph 使用由軟體控制的通用硬體，並且可以透過應用程式介面 (API) 獲得管理功能，因此它被歸類為軟體定義儲存 (SDS)。
紅帽 Ceph 儲存是一款即用型儲存系統，軟體定義存儲，開放、適應性強、可擴展且隨處支援。 將開源開發的創新與紅帽的技術核心和支援相結合。 該解決方案提供與 OpenStack 的緊密整合，並從頭開始設計，為雲端環境和其他工作負載提供下一代儲存。
在這裡，我們將查看在戴爾伺服器（特別是我們出租的 Dell PowerEdge R730xd）上實施此解決方案的範例，並考慮基於這些平台建立儲存的優勢。 這些資訊對於想要探索在 Dell PowerEdge 伺服器上使用紅帽 Ceph 儲存的優勢以及必須使用經過驗證的最佳實踐來設計和規劃實施的架構師、工程師和 IT 管理員可能有用。
但一開始：
關於平臺本身的一些信息，我們提供哪些選項以及為什麼它具有成本效益？
Dell PowerEdge R730xd 是迄今為止適合企業任務及其他任務的最佳平台之一，它贏得了許多不同的獎項，並且是一個非常有效的儲存解決方案，因為它可以以合理的價格提供高密度資料儲存。
PowerEdge R730xd 提供三種機箱配置，具有不同的外形尺寸和驅動器組合，以及可選的後擴展單元：
- 24 個用於 SAS、SATA 或近線 SAS 硬碟的前置 2,5 吋托架，以及 2 個可選的 2,5 吋後托架。 2,5 吋機殼前端可選擇支援最多 4 個戴爾 PCIe Express 隨身碟。
- 12 個前置 3,5 吋 SAS、SATA 或近線 SAS 硬碟托架，配備 4 個可選內部 3,5 吋熱插拔驅動器托架，以及後部兩個可選 2,5 吋硬碟托架。
- 18 個前置 1,8 吋 SATA 托架，8 個 3,5 吋 SAS、SATA 或近線 SAS 硬碟托架，以及後 2 個可選的 2,5 吋托架。
似乎每個機箱都適合其類型的任務。 這是肯定的。 但它們真的同樣具有成本效益嗎？
我們選擇了第二種方案，以便在具有 12 個驅動器托架的機箱上滿足盡可能廣泛的用戶的需求。 因為我們認為這是最有效的。 這就是原因。 該解決方案的經濟效率已體現在其多功能性上- 各種外形尺寸的驅動器可以安裝在該機箱中，並且購買成本更便宜，而且重要的是，您可以在使用多個互連平台處理數據時獲得更高的生產力而不僅僅是儲存密度高而生產率明顯較低的一種。
我們相信，透過將幾個類似的平台連接成一個多千兆位元本地網路（可以使用雙埠十千兆位元Intel X20-T540 卡，將每個節點以2 Gbit/s 或更高的速度連接到本地網絡，我們另外提供），與具有更高存儲密度的平台相比，我們可以獲得明顯更好的結果和性能。 這對於使用這些平台來處理資料庫的基礎設施尤其重要。 唉，由於驅動器數量較多，控制器可能會嚴重過載，而且 xd 版本中的附加控制器不可用。 當使用具有 12 個托架和本地多千兆位元網路的平台時，可以實現的效能會更高，而解決方案也將更加分散和可靠。 一句話—性價比高！
結構設計特色、顯示卡的使用
Dell PowerEdge R730xd 平台尺寸僅為 2U，最多支援 2 個 Intel Xeon E5-2600 v3 及更高處理器，也就是說，在使用 36 核心處理器時，它允許您最多獲得 18 個核心。 我們選擇了中間選項，但最新一代 - 12 核心 E5-2650 v4 處理器（總共 24 個核心可供您使用，考慮到多執行緒 - 48 個核心），因為事實證明它是成本最高的-有效的。 所以，在第四代中，實作了更有效率的處理器指令，例如負責資料加密的AES，比相同處理器但第三代的效率提高了70%。 同時，處理器和平台可以支援高達 1,54 TB 的 RAM，這在某些非常特殊的情況下非常重要。 我們選擇了最受歡迎、價格和運行速度最實惠的選項 - 128GB DDR4 RAM，並根據訂戶的要求提供升級的可能性。
R730xd的前面板上有6個系統狀態指示燈，可以通知您各種問題，因此您可以及時採取適當的措施來避免許多關鍵問題。 RAM 的 DIMM 插槽直接位於主機板上。 R730xd 支援註冊糾錯 DIMM 以及 LRDIMM（低負載雙列直插記憶體模組），這是一種相對較新的伺服器記憶體類型。 但我們不使用它，因為當目標是提高運行速度時，LRDIMM 僅對大量記憶體有用。
內部雙 SD 模組 (IDSDM) 允許客戶部署戴爾的容錯虛擬化技術，該技術為嵌入式虛擬機器管理程式提供故障轉移冗餘。 儘管 PowerEdge R730 支援 GPU，這在虛擬辦公室環境（虛擬桌面）以及高效能運算和協作處理方面非常有用，但 R730xd 不支援 GPU，因為無法為顯示卡提供適當的冷卻。 然而，到目前為止，我們對這項服務的需求很少，只有一個訂閱者為伺服器訂購了視訊卡。 正是出於這個原因，我們沒有大量訂購 R730 平台，但可以根據要求交付，並配備推薦的卡之一。
因此，不幸的是，租用解決方案的價格不會那麼有吸引力，並且會增加超過 2 倍，具體取決於付款期限和合約期限。 我們建議透過我們在荷蘭的供應商自己購買卡，價格如下，並且僅來自此推薦清單（這些是我們提出請求時戴爾本身的建議），也許這些資訊對某人有用：
NVIDIA Tesla M10 GPU CusKit：2,884.98 歐元
NVIDIA Tesla M40 GPU：4,913.33 歐元
NVIDIA Tesla M40 24GB GPU，客製化套件：6,458.95 歐元
NVIDIA M60 GPU，被動，需要 GRID 2.0 軟體才能實現 VDI 功能，客製化套件：5,094.95 歐元
許可證：
Nvidia GRID vApps 訂閱授權 3 年，1 個 CCU：20 歐元
Nvidia GRID vPC 訂閱授權 3 年，1 個 CCU：95 歐元
Nvidia GRID vWS 訂閱授權 3 年，1 個 CCU：480 歐元
因此，如果您準備好簽訂至少 2 年的合約來租用 Dell R730 伺服器（不是 xd，這就是該解決方案昂貴得多的原因） - 請聯繫 [電子郵件保護]，我們將很高興為您提供協助！ 使用上面推薦的其中一款顯示卡，在 DELL R730 2 x E5-2650 v4 / 128GB / 6 x 480GB SSD / 1Gbps 100TB + GPU 配置和 2 年合約中，每年的費用約為 6816 美元，而不是 2988 美元每年，本文中討論的Dell R730xd+ 平台將需要支付顯示卡和許可證的費用，因為這是非常特殊的設備。
然而，即使這個價格也比烏克蘭和俄羅斯的數據中心為此類解決方案提供的價格更具吸引力，如果他們想提供此類解決方案的話……奇怪的是，在與戴爾合作的荷蘭直接成立， 從我們的客戶下訂單的那一刻起，帶有視訊卡的服務器承諾的交貨時間幾乎是兩個月（客戶同意等待，因為市場上根本沒有替代品），由於該產品的特殊性強 戴爾根本沒有庫存。 儘管如此，不到一個月的時間就完成了交付。 感謝資料中心供應部門和戴爾人員的效率。 但對我來說，這種體驗仍然不同尋常，因為標準的戴爾 R730xd 平台在幾天內即可交付。
PERC 控制器控制和功能
此伺服器可透過方便的iDRAC8（整合戴爾遠端存取控制器8）和戴爾生命週期控制器進行管理，從而減少管理任務所花費的時間，降低出錯的可能性，提高安全性並提高IT 環境的整體效率。
對於我們的訂戶，透過 RMI（遠端管理介面）提供對 iDRAC8 的訪問，出於安全目的，只能從專用資料中心網路存取該接口，我們透過開放 VPN 隧道免費提供存取權限。 登入後，iDRAC 將顯示系統概覽以及透過 iKVM 的虛擬控制台視圖。
我要特別注意監控；iDRAC8允許您獲取最近一小時、一天或一周的功耗統計數據並限制最大功耗：
iDRAC 溫度監控和記錄系統可讓您從溫度感測器收集資料並確定其所在的範圍。 因此，處理器在一年中僅 10% 的時間處於警告溫度範圍被認為是可接受的，而 1% 的時間處於嚴重溫度範圍則被認為是可接受的。 臨界帶內的時間也會影響警告帶內的允許時間。 溫度資料擷取從系統出廠後開機時開始，且不可重置。
第13代戴爾PowerEdge伺服器配備了PERC9控制器，其中先前在PERC8控制器中使用的LSI CacheCade技術已被更有效率的技術－SanDisk的DAS Cache所取代。
在綜合測試中，在 HDD+SSD 混合配置的情況下，DAS Cache 顯著提高了 HDD 陣列的效能。 因此，在 RAID5（選擇第 6 級以確保最大容量）的 6 個 HDD 陣列和 5 個 SSD RAID10（4 + 1 熱備 SSD 以最大化陣列性能）的情況下，使用 DAS Cache 時的性能陣列是5個HDD RAID6 + DAS Cache在指定的SSD陣列上結果顯示接近SSD陣列本身的效能：
因此，在熟悉了該平台之後，我們現在可以看看該平台在建立儲存設施時的優勢。
是什麼讓 Dell R730xd 平台成為資料倉儲部署（尤其是 Red Hat Ceph）的最佳選擇？
紅帽 Ceph 儲存環境使用業界標準伺服器來實現可擴展性、彈性和效能。 資料保護方法在解決方案的成本中起著關鍵作用。 Ceph允許使用者針對不同的儲存池選擇不同的安全方法。
複製儲存池產生儲存物件的完整副本，是快速復原和資料操作的理想選擇。 對於複製儲存池，當三個資料副本駐留在三個獨立的 Ceph 節點上時，Ceph 預設複製因子為 XNUMX。
防腐蝕儲存池提供具有奇偶校驗的單一資料副本，這在需要長期資料儲存時非常有用，並且具有成本效益。
PowerEdge R730xd 是一款極其靈活且可擴展的兩單元機架伺服器，可提供高效能處理和各種工作負載最佳化的本地儲存選項，包括混合層。 該開發包括廣泛的配置，非常適合 Ceph。
— R730xd 能夠為小型和大型企業創建高效的基礎設施解決方案。
— R730xd 透過自動化部署功能縮短了偵錯時間，從而減少了使用者輸入並減少了人為錯誤。
「PowerEdge 伺服器透過 iDRAC Quick Sync 和 iDRAC Direct 等創新管理工具提升資料中心 IT 效能，提供全面的系統運作狀況視覺性和快速部署。
「PowerEdge 伺服器優化了功耗，提供了更好的每瓦性能以及對功耗和冷卻的更精確控制。
Dell PowerEdge R730xd 透過以下方式提供確保最大生產力的優勢：
— 透過使用最新技術和動態本機儲存來提高應用程式效率。
「前端存取儲存支援多種驅動器，從低成本 SATA HDD 到超快 2.5 吋 SSD，以及 PowerEdge Express Flash NVMe PCIe SSD 等超低延遲驅動器，可輕鬆快速地進行擴充。
- 由於在 PERC 控制器中使用了新的快取技術，R730xd 非常適合混合儲存設計，從而提高了 Ceph 解決方案的成本效率。
使用 Red Hat Ceph Storage 實作基礎架構的範例由 5 台 Dell R730xd 伺服器組成，如下所示：
在對 Dell R730xd 平台的各種配置進行獨立測試時，獲得了以下結果：
我們的平台版本顯示出非常好的結果，就閱讀而言，也許是最好的。 如果我們考慮到我們大量訂購這些平台的事實，因此我們可以提供比其他平台選項低 2 倍以上的價格 - 事實證明，就閱讀和寫作而言，它是最好的整合的成本效益參數。 最後，沒有什麼可以阻止您建立由 7-8 個平台（而不是 5 個）組成的叢集。同時，您可以獲得更高的容錯能力。
建置此類基礎設施時是否需要 10G 交換器？ 不，不是必需的，我們的一個客戶使用以下本地網路連接方案建立了一個基礎設施，儘管是由 3 台伺服器組成的：
這讓他節省了相當多的費用 - 每月 350 美元的交換機租金，因為 10 千兆位元交換機相當昂貴，而我們只提供最好的 - Arista 7050tx-48-r。 我們認為多埠解決方案沒有任何意義。
Dell R730xd 平台原則上有哪些功能？
不久前，微軟對這些平台在建構少量節點的資料倉儲的情況下的效能進行了有趣的測試。
我們使用 4 個 Dell R730xd 節點，使用 100 埠 Arista DCS-32CX-7060S 32Gb 交換器聯合成本地 100Gb 網絡，運行 EOS 版本 4.15.3FX-7060X.1。
使用的節點配置如下：
2 個至強 E5-2660v3 2.6Ghz (10c20t)
256GB DRAM（16 個 16GB DDR4 2133 MHz DIMM）
4x 三星 PM1725 3.2TB NVME SSD (PCIe 3.0 x8 AIC)
戴爾HBA330
4 個英特爾 S3710 800GB SATA 固態硬碟
12x 希捷 4TB 企業級容量 3.5 吋 SATA 硬碟
2x Mellanox ConnectX-4 100Gb（雙埠 100Gb PCIe 3.0 x16）
Mellanox FW 訴。 12.14.2036年XNUMX月XNUMX日
Mellanox ConnectX-4 驅動程式 v. 1.35.14894
設備 PSID MT_2150110033
單埠連接/適配器
使用VMFleet，每個節點上拉起20個虛擬機，即總共80個虛擬機。 每個虛擬機器配置有 1vCPU。 然後使用 VMFleet 運行 DISKSPD 實用程式來測試 80 個節點中每個節點上的儲存效能，該實用程式免費提供 。 測試參數如下 - 1 個線程，512 個 I/O 操作的順序讀取 4KiB。
正如您在上圖中所看到的，我們成功實現了每秒 60 GB 的令人難以置信的結果，大約相當於每秒下載 5 個壓縮形式的維基百科英文版本 (11.5GiB)。 每個虛擬機器的速度約為每秒一張 CD - 750 MB。
該測試完美地展示了當計算、儲存和網路三個元件達到平衡時解決方案的效率，從而最大限度地減少不平衡系統中可能出現的潛在瓶頸。
其他製造商的平台怎麼樣？
戴爾 R730xd 與 HP ProLiant DL380 的比較
為了比較效能，我們選擇了比我們提供的租賃服務更弱的硬體 - 配備 E5-2620v3 處理器的伺服器，而不是 E5-2650v4，後者的生產力明顯更高。 用於此比較的主要測試方法是測量 IOPS 數。 使用了幾種不同的工作負載模擬，即全讀和30%讀/70%寫（類比OLTP系統，事務性系統，處理小事務，但流量很大，客戶端需要保證最短的回應時間）。
經過多次測試，消除隱藏因素對系統效能的負面影響。 首先，我們僅使用 HDD 儲存體 (730x380TB HDD RAID5) 在 Dell R1xd 和 HP ProLiant DL5 上執行一些基本測試，以提供基準效能基準。 然後，在戴爾伺服器上使用5x1TB HDD RAID-5 儲存（使用安裝在SAS SSD（2xSAS 480GB 三星SSD RAID1）上的DAS 快取）以及使用HPE SmartCache 和一組類似的儲存磁碟機的HP 伺服器上執行相同的測試集和緩存。 最後，最後一組測試在戴爾伺服器上運行，使用 NVMe PCIe SSD 驅動器上的 DAS Cache（軟體 RAID 中的 2x400GB Samsung NVMe），以顯示在讀寫密集型情況下快取對應用程式效能提升的最大貢獻。 由於智慧型緩存不支援 NVMe 驅動器進行緩存，因此未在 HP 伺服器上執行類似的測試。
系統配置：
戴爾 PowerEdge R730xd（第 13 代）
HP ProLiant DL380（第 9 代）
服務器
CPU：x86-64 - Intel Xeon CPU E5-2620 v3 @2.40GHz；
記憶體：32GB DDR4。
CPU：x86-64 - Intel Xeon CPU E5-2620 v3 @2.40GHz；
記憶體：32GB DDR4。
作業系統/軟體
Windows 2012 R2 SP1；
閃迪 DAS 快取 v1.4。
Windows 2012 R2 SP1；
HPE 智慧型快取。
儲存/快取
5x1TB 硬碟 RAID5；
2xSAS 480GB 三星 SSD RAID1；
2x400GB 三星 NVMe 軟體 RAID。
5x1TB 硬碟 RAID5；
2xSAS 480GB 三星 SSD RAID1。
測試
模擬OLTP讀寫工作負載；
300GB資料庫大小；
4 個同步 IOMETER 工作線程，佇列深度為 32。
模擬OLTP讀寫工作負載；
300GB資料庫大小；
4 個同步 IOMETER 工作線程，佇列深度為 32。
在不同的區塊大小（4 和 8 KB）下進行了多次隨機讀取/寫入測試。 對於每個區塊大小，依序在 100% 讀取操作、70% 讀取操作和 30% 寫入操作下進行測試。 與使用快取進行效能加速相關的測試運行了 900 秒（15 分鐘），以便為快取提供足夠的時間來完全運行並產生更準確的結果。
以 IOPS（每秒輸入/輸出運算元）為單位的效能測量：
正在測試的伺服器/配置
4KB RR
100% 閱讀
4KB RR
70% 讀取 30% 寫入
8KB RR
100% 閱讀
8KB RR
70% 讀取 30% 寫入
戴爾 R730xD（無快取）
1650
974
1540
1040
HP ProLiant DL380（無快取）
1370
628
1322
630
戴爾 R730xD
附 DAS 緩存
138884
66483
98368
56641
惠普 ProLiant DL380
帶智慧緩存
41273
33534
35984
39396
戴爾 R730xD
DAS 快取和
NVMe PCIe 固態硬盤
264750
158157
257150
104490
以處理器利用率百分比衡量效能：
正在測試的伺服器/配置
4KB RR
100% 閱讀
4KB RR
70% 讀取 30% 寫入
8KB RR
100% 閱讀
8KB RR
70% 讀取 30% 寫入
戴爾 R730xD（無快取）
企業排放佔全球 0,4%
企業排放佔全球 0,28%
企業排放佔全球 0,42%
企業排放佔全球 0,3%
HP ProLiant DL380（無快取）
企業排放佔全球 0,8%
企業排放佔全球 0,5%
企業排放佔全球 0,8%
企業排放佔全球 0,5%
戴爾 R730xD
附 DAS 緩存
企業排放佔全球 13%
企業排放佔全球 8,8%
企業排放佔全球 11,34%
企業排放佔全球 7,83%
惠普 ProLiant DL380
帶智慧緩存
6%
6%
5%
5%
戴爾 R730xD
DAS 快取和
NVMe PCIe 固態硬盤
企業排放佔全球 16%
企業排放佔全球 10,1%
企業排放佔全球 16%
企業排放佔全球 5,78%
測試結果顯示，與 HPE SmartCache 相比，使用 SanDisk DAS 快取時，Dell R730xd 平台的效能顯著提升，且 NVMe PCIe SSD 支援提供了更大的優勢。 在 OLTP 模擬中，與 HPE SmartCache 相比，由於使用 SanDisk DAS Cache 和 SAS SSD，R730xd 的 IOPS 提高了 3 倍；由於使用 SanDisk DAS Cache + NVMe PCIe SSD，IOPS 提高了 6 倍。 SanDisk DAS Cache 更高的 CPU 使用率，以及 SanDisk DAS Cache + NVMe PCIe SSD 更高的 CPU 使用率，只是更高的 IOPS 計數的結果。 相反，顯示了處理器資源的更優化消耗。
因此，如果在利用率為 6% 的 HP 中，IOPS 的結果為 41，即每 1 IOPS 消耗 0,15% 的處理器資源，那麼在 Dell R730xd 的情況下，我們的消耗為 16%，為 264，這提供更有效率的指標— 每0,06 IOPS 佔用1000% 的處理器資源。
也就是說，在處理器利用率方面，戴爾也表現得更好（2,5倍），儘管它的處理器利用率值高出%，但是，正如我們能夠驗證的那樣，這只是處理的結果操作數量顯著增加，因此生產率更高。
因此，無論是在性能還是成本效益方面，戴爾 R730xd 平台都比 HP ProLiant DL380 高效得多（很多倍）。
Geekbanch 3 測試配備 E730-5 v2640 處理器的 Dell R4xd 的結果或為什麼處理器指令和控制器快取很重要
正如我們在上面看到的， 只有平衡運算能力、儲存和網路這三個組成部分，我們才能取得最大成果，因為不平衡系統中可能出現的潛在瓶頸被最小化。
但同樣極為重要的是平台處理器對大量指令的支援及其效率。 我在上面已經提到，在某些情況下，看似微不足道的世代差異可能會發揮相當重要的作用。 因此，根據獨立測試的結果，我們提供的E5-2650 v4在加密（AES指令）的情況下比E70-5 v2650有效3%。
那麼來自低成本而非高端市場的競爭對手所提供的「美味」解決方案又如何呢？ 為什麼我們的解決方案更好？ 為什麼我們的解決方案如此優質？ 答案很簡單—— 我們的伺服器過去和現在都是平衡的。 即使它們之前的頻率較低或內存量較小，它們也總是根據上述三個參數進行平衡。 包括一個可靠的資料中心，擁有企業部門所需的證書，以及出色的外部通訊管道，可提供從荷蘭到歐洲其他國家、俄羅斯和烏克蘭甚至俄羅斯和烏克蘭的最小延遲
但現在我們在這些指標上都給了有競爭力的報價，同時在10個地點，荷蘭9個，美國5個地點，但先不說我們，我們看測試。 不幸的是，此測試目前僅適用於我們平台的 E2640-4 v10 版本（12 核，而不是 XNUMX 核）。
當然，它不是很客觀，因為它沒有考慮到平台的所有優勢，同樣是我們談到的SanDisk DAS緩存，在特定的情況下，真實的性能指標可能比合成的要好得多案例，很多！ 但還是可以得到一些了解的。
讓我們注意許多指示。 最有指示性的可能是已經提到的 AES，在大約相同的頻率下，第一個核心的值之間的差異可能高達 1 倍，具體取決於處理器，比較的其餘指令顯示出值的差異數次至1000次。
你可以自己做 並進行比較，但不要忘記該測試並不完全具有指示性，因為它沒有考慮整個硬件，而是主要表徵處理器。
儘管如此，我希望這些結果在分析特定解決方案的有效性時對您有用。
使用 Dell R730xd 伺服器作為裸機，效果更好！
我們的一些客戶決定放棄使用 VMware 雲端解決方案，轉而使用裸機解決方案（鐵伺服器），戴爾 R730xd 平台在這方面為他們提供了很大幫助。 我們在這裡談論的不僅是公有雲，還包括私有雲。
為什麼人們越來越多地做出這樣的決定？ 關於公有雲，一切或多或少都是清楚的。 我自己認為公有雲是一個大行銷，如果有東西落在那裡（所有的雲端遲早都會落下），它會落在那裡很長一段時間。 一個例子是同樣著名的亞馬遜，它曾一度擱置了幾天的時間，並提供了一項重要的服務，用於收集遙測醫療數據，包括使用起搏器的患者的心臟狀況數據，這些數據由醫生、幾名醫生進行監測。人們死了......最近，當我們的公司Bitrix 躺下時，事實證明，原因是員工在關閉某些機器時，由於拼寫錯誤，關閉了不必要的節點，影響管理節點，導致虛擬機器因叢集規模過大而在 5 小時內重新啟動...但這不是唯一可能的問題；可能會出現由於使用而突然遇到“瓶頸”的情況雲被其他一些項目所影響，或缺乏快速管理其基礎設施以滿足您自己的需求的能力。
當談到私有雲時，理論上，虛擬化可以簡化可用性和災難復原。 實際上，在很多情況下這根本沒有意義：
如果節點出現技術問題，15-30 分鐘的停機時間是可以接受的。
並非所有專案都需要大約 100% 的正常運作時間，除了習慣支付一美元並要求 100% 正常運作的小學生。 對於某些專案來說，99,9% 的正常運作時間保證不僅僅是一個可接受的選擇。 因為 0,1% 是每月最多 44 分鐘的不可用時間，這種情況可能因各種計劃外原因而發生 - 由於硬體故障或網路不可用。 我們保證標準解決方案的網路正常運作時間為 99,99%，每月僅允許 4 分鐘不可用。 如果伺服器連接到2個經過不同通訊節點的獨立通道，且其流量由獨立的核心處理，則保證的網路正常運作時間將增加數倍。 根據認證，這甚至可以滿足銀行的正常運行時間要求，每年大約 40 分鐘的不可用時間是可以接受的。 事實上，無法使用的時期極為罕見。 在資料中心工作的5年裡，從未出現過因網路或電力問題而導致所有伺服器同時無法使用的情況。 即使荷蘭發生全球停電，許多其他資料中心都無法使用——有些忘記給柴油機加油，有些沒有足夠的 UPS 電源，在我們的資料中心，只有不到 3% 的伺服器短暫不可用。一段的時間。 客戶向我們租用的一些伺服器，甚至是相當過時、看似過時的硬件，比新品牌的解決方案更容易出現故障，甚至三年沒有重新啟動過一次，就像三年來從未丟失過網絡一樣。 。 3 年內不能使用 30 分鐘是否可接受？ 甚至對銀行來說也不止於此。
一個合理的問題出現了，為什麼要多付錢呢？ 不言而喻，您不應依賴偶然性，而應始終從合理保留的原則出發。 我發現的主要規則如下： 保留費用不應超過因缺乏保留而在一段時間內無法使用時可能發生的損失。 也就是說，如果保證的正常運行時間允許每月有40 分鐘的不可用時間，而在這樣的時間內不可用，損失將達到數百甚至上千美元- 只需租用額外的解決方案即可增加正常運作時間保證沒有意義。 因為實際上，伺服器不會每個月有 40 分鐘不可用；40 分鐘不可用是保證，是最壞的情況。 正如實踐所示，這不是每月實施的。
這樣，伺服器就可以很重要，但不會成為關鍵任務，並且當專案擁有者不介意手動將負載切換到另一台專用伺服器時，我們可以避免建置故障轉移叢集和共享故障轉移儲存的複雜性。
工作期間生產力低落是不可接受的。 我們的許多客戶正是出於這個原因選擇戴爾的裸機解決方案；在標準操作期間使用完整的硬體比支付過高的雲端費用便宜得多，利潤也更高，而且實際上不會出現無法訪問的問題，正如我們已經討論過的那樣選項和雲端相同的性能，這將比專用解決方案貴幾倍。 雲端和叢集根本無法滿足資源需求，對於此類客戶來說不具成本效益。
訂戶不想為功能有限的服務支付大量費用。 我們的客戶大多是小公司，他們沒有自己的技術部門，也沒有資金來購買自己的硬體。 購買硬體對他們來說可能是一個真正的打擊，並且不能提供足夠的性能，因為隨著時間的推移，硬體往往會過時，即使在3 年後，當公司發展壯大並且有更好的東西時，扔掉昂貴的硬體也是一種恥辱。是需要的。 如果您從我們這裡租用戴爾 R730xd，如果您選擇簽訂一年合約的租賃選項，您有機會隨時或一年後切換到另一台伺服器。 此外，還有機會節省 VMware 授權的費用。
使用 Dell R730xd 伺服器作為資料庫伺服器
我們的許多使用這些資料庫伺服器的客戶都喜歡上了這個平台。 不僅因為，與戴爾 R730 不同，xd 版本可以提供對 NVMe PCIe SSD 驅動器的支持，從而提供最小的延遲，這對於此類解決方案極為重要。 而且也因為即使使用我們向客戶提供的傳統 2,5 吋 SSD，該控制器也非常有效率。
當然，戴爾R730xd也有一個缺點──只有1個控制器，而擁有730個驅動器的戴爾R26則使用2個硬體控制器。 但這並不是一個嚴重的問題，因為我們選擇了具有 12 個驅動器托架的平台，因此在使用該平台和大量 SSD 時，您不會遇到控制器性能不足的瓶頸。 而能夠安裝 NVMe PCIe SSD 的優點完全彌補了這個缺點。
如上所述，並不是每個人都需要複雜的資料庫叢集；這個平台能夠提供的效能更為重要。 我們的一位客戶就是這樣做的，放棄了過度的虛擬化和構建複雜的集群，租用了帶有專用驅動器的 VPS，用於從主 Dell R730xd 伺服器進行資料庫備份： 當然，如果主節點出現問題，效能會下降，需要手動切換，但在預算有限的情況下，這是一個非常划算的解決方案。
我們並沒有鼓勵每個人都進行這樣的儲蓄；在某些情況下甚至是非常合理的。 然而，透過每月僅增加230 美元的預算，您就可以負擔得起相同的E5-2650 v4 節點，並將它們連接在20 Gigabit 本地網路中，原則上，這將允許您建立一個延遲可接受的小型叢集即使不使用 PCIe NVMe SSD 硬碟。
解決方案本身如下所示（帶有一組基本驅動器）：
Dell R730xd 2 x Intel Dodeca-Core Xeon E5-2650 v4 128GB DDR4 6x480GB SSD 1Gbps 100 TV + Intel X540-T2 20GBPS LAN – 289 美元/月
Dell R730xd 2 x Intel Dodeca-Core Xeon E5-2650 v4 128GB DDR4 6x480GB SSD 1Gbps 100 TV + Intel X540-T2 20GBPS LAN – 289 美元/月
增加其數量來提高生產力並不總是有意義的。 因此，在資料庫測試中，我們發現8個SSD的解決方案僅比4個SSD的解決方案效率高出35%。
至於建議的 RAID 級別，在某些情況下 RAID5 可能是最佳選擇。 當然，RAID10 提供了更好的效能，但如果磁碟機速度太快以至於在 RAID10 中使用它們會導致控制器成為瓶頸怎麼辦？ 在這種情況下，使用熱備用磁碟機建置硬體 RAID 陣列 RAID5 比 RAID10 更有利可圖（如果目標不是損失一半的 SSD 配額）。
我需要啟用控制器快取還是禁用它更好？ RAID 控制器的記憶體量非常有限，使用 SSD 時 1GB 是多少？ 在使用快速 SSD 的情況下，啟用讀取快取是沒有意義的，因為透過用讀取操作填充內存，這不會變得更快，因為 SSD 已經足夠快了，我們沒有留下足夠的寫緩存，並且眾所周知，在廉價的SSD 中，瓶頸是寫入操作，由於超額配置不足和100% 的可用配額利用率（可能下降十倍）導致效能下降。 因此，我們建議僅啟用寫入快取。 從而確保該解決方案的最大效率。
NTFS 區塊大小真的很重要嗎？ 對於大多數存儲，64KB 被認為是實現最大效能的最佳區塊大小。 但我們經常遇到這樣的情況：客戶端已經在使用資料庫伺服器，並且使用標準 NTFS 叢集大小為 4KB 的初始配置。 要解決此問題，您需要重新格式化驅動器，但在一般情況下差異真的那麼大嗎？ 您是否需要讓自己面臨與遷移相關的可能的停機和不便？
Dell R730xd伺服器中的控制器即使在4個SSD驅動器和啟用寫入緩存的情況下也能提供如此好的性能（非常重要的一點，應該禁用讀取緩存，因為它沒有提供任何優勢，而只會降低寫入作業的效率）如上所述），即使使用 4KB 的標準區塊大小，我們也能獲得非常好的效能指標，非常好。
儘管如此，如果訂閱者沒有考慮到某些事情，我們總是願意見面並準備在一段時間內為他們提供類似的平台來開展工作。
RAMdrive 仍然比 SSD 驅動器更快。 如果您的查詢可以在 TempDB 中處理，例如排序或合併，那麼使用 RAMdisk（一種將部分 RAM 轉換為儲存的程式）可能非常值得。 因此，透過比較 RAID8 中 10 個 SSD 驅動器與 RAMdrive 的速度，我們發現佇列深度為 4 的 4K 寫入操作大約快 32 倍，這完全模仿了 TempDB 檔案的操作。 即使將 8 個 SSD 組合成 RAID0，也無法擊敗 RAMdrive 的結果。
RAID5在8個SSD硬碟的情況下可以比RAID10更有效。 佇列深度為 4 的 32K 讀取速度大約快 40%，考慮到 RAID5 的特性，這並不奇怪。 在其他測試中，RAID5 在效能上勝出，例如，順序寫入時效率為20%，僅在佇列深度較大（在我們的範例中為4）的32K 寫入操作中表現較差，結果效率低了30%。 因此，在某些情況下使用 RAID5 非常經濟合理。
更多儲存空間並不總是意味著更快。 當我們處理隨機的小操作時，向陣列添加超過一定限制的驅動器根本不會提高效能。 看來是為什麼呢？ 事實證明，一切都取決於控制器的功能，控制器被迫將資料寫入一大堆驅動器。 這就是我們購買最多 12 個驅動器的平台的原因，以減少瓶頸的可能性。 但是，您需要查看每個項目內的操作強度，有時 4 個較大的驅動器（例如 960GB）可能比一堆 480GB 驅動器更好且更具成本效益的解決方案。
使用 Dell R730xd 伺服器作為 Aerospike NoSQL 資料伺服器
Aerospike 是一個開源 NoSQL 資料庫，針對速度和可擴充性進行了快閃記憶體最佳化。 Aerospike 旨在為讀取請求和繁重的寫入負載提供極低的延遲，從而滿足需要能夠處理大量 I/O 作業的現代業務需求。 Aerospike 直接管理其叢集節點上的本機存儲，無論來源媒體的檔案系統是 DRAM、快閃記憶體還是傳統硬碟。 這使得關鍵資料能夠儲存在最快的媒體上，而快速處理至關重要，而 Aerospike 資料庫的分散式特性可確保在叢集節點發生故障時的高度可靠性。
戴爾第 13 代 PowerEdge R730xd 伺服器採用最新的 E5-2650 v4 處理器和快速 DDR4 SDRAM，提供令人難以置信的運算能力。 使用 NVMe SSD（例如三星 SM1715）的能力可以幫助在高負載節點中以最小的延遲獲得巨大的效能。 這使得即使在非常大的資料庫中也能夠符合現代SLA 對一筆交易處理時間的要求，並具有可靠的防詐欺保護水平，使得該解決方案即使對於有時進行交易的金融部門和銀行轉帳也是可以接受的幾個小時甚至幾天之內。
對於銀行業，我們可以提供基於這些平台的解決方案，在叢集節點之間具有 40 和 100 Gbit/s 的本地網路並使用適當的交換器。
在 DMZ 網路中使用 Dell R730xd 伺服器
我們很高興為我們的訂戶提供最高的安全標準。 我們提供這些伺服器的資料中心擁有許多認證： , , , и .
但為了滿足同一個谷歌的要求，一些客戶需要建造所謂的非軍事化網絡（DMZ網絡）——安全性更高的網絡，這意味著存在硬體防火牆，限制對設備的訪問，並允許您將必要的組件隱藏在防火牆後面，進一步提高安全性。
當立即訂購這樣的解決方案時，一切都很好，但是在過程中幾乎沒有停機時間的情況下實施過渡是非常困難的，最近我們的一位客戶就遇到了這種情況，其項目是處理來自不同國家的公民的簽證申請即使在幾個小時內無法訪問也可能導致數萬美元的損失。 但我們找到了解決方案，按照客戶的意願，去開會，把額外的設備放到櫃子裡，移動不太重要的設備，並按照方案打開防火牆，這樣他就可以在不停機的情況下進行遷移。
曾經/成為
也許這個方案對進行此類遷移的人也有用，因為資料中心的工程師並不總是希望看到明顯的東西，而是堅持 2 小時的停機時間在防火牆後面進行切換，但我懇請您 -如果需要，請提前訂購硬體防火牆。 我們很靈活並且總是願意適應，但在某些情況下我們的能力可能有限。
在未來的出版物中，我們將嘗試進行一些額外的測試並分享使用這些平台的額外經驗，這將進一步加深對選擇最有效解決方案的理解。 畢竟，令人驚訝的是，在資料庫負載較高的情況下，兩個 SSD 磁碟機的 RAID0 可能會比單獨的寫入磁碟機慢，這就是為什麼我們不時收到 NVMe PCIe SSD 請求的原因到時間了。 我們很可能會展示實施解決方案的最有效方案，分享在一個RAID 控制器內建置多個RAID 陣列有效時的額外經驗，並展示在哪些情況下兩個獨立的10 個驅動器的RAID4 陣列將優於一個RAID10 陣列的8 個磁碟機。1. TempDB 使用 RAID5 以及其他所有內容使用 RAIDXNUMX 什麼時候會有效。 當您的預算有限時，怎麼能沒有 NVMe PCIe SSD呢？
戴爾 R730xd：Habrahabr 讀者的福利
我們希望為您提供最好的產品，並為此竭盡全力，為 Dell R730xd 提供獨特的價格：
- 在荷蘭
- 在美國
配置可以非常多樣化，例如， 以下內容可在荷蘭立即啟動：:
戴爾 R730xd 2 個英特爾 Dodeca-Core Xeon E5-2650 v4 128GB DDR4 6×480 SSD 1Gbps 100 電視 -*249 美元
戴爾 R730xd 2 個英特爾 Dodeca-Core Xeon E5-2650 v4 128GB DDR4 12×240 SSD 1Gbps 100 電視 -*249 美元
戴爾 R730xd 2 個英特爾 Dodeca-Core Xeon E5-2650 v4 128GB DDR4 4x4TB 4x480 SSD 1Gbps 100 電視 — *249 美元
戴爾 R730xd 2 個英特爾 Dodeca-Core Xeon E5-2650 v4 128GB DDR4 12x4TB SATA 1Gbps 100 電視 — *249 美元
他們可以每月支付 1 美元以上的價格使用誠實的專用 120Gbps Unmetered（不包括流量）。 另外還有機會購買防火牆、網路卡、交換器並建置多千兆位元本地網路。 但價格條件適用於一年的合約。
我們希望改善這種情況，並為短期付款和無合約租賃提供獎金，使報價更加實惠。 任何在荷蘭訂購並支付任何建議選項為期 1 個月的人，我們將提供 完全相同的伺服器 1 個月完全免費，或者我們將重新計算訂購的配置，並以與年度合約相同的價格（249 美元/月而不是 369 美元/月）計算訂購的伺服器，並將差額返回到餘額中。 為此，只需在評論中留下您的訂單號碼即可。 對於尚未成熟的專用解決方案的人，我們提供在荷蘭或美國的這些平台上租用任何帶有專用驅動器的 VPS (KVM)，例如， ，付費1、4、1、3個月分別可獲得6-12個月的使用獎勵，請在評論中註明訂單號碼。 現在建設基礎設施變得更加容易！
來源： www.habr.com