真實服務器磁碟效能測試
機器規格
Dell R230 Xeon E3-1230 v5 3.4Ghz 4 core ,64GB DRAM ,SAS Raid Card Raid 10,600G SAS 15K *4
這等於說二顆 SAS 15K 600G 效能達到了 Read 7xx MB/s Write 4xx MB/s
測試完客戶的磁碟效能沒有問題 我們才交貨.
這邊我們發現一個狀況 假設客戶要使用軟體式磁碟管理方式
如vSAN,Proxmox VE ZFS,Nutanix 等
使用Server預設Raid卡 如730P切換到no raid模式.效能會很低落.
非常不建議 使用no raid模式. 會大量影響效能中
至於搭配哪張HBA
SAS 2008 6Gbps
SAS 3008 12Gbps 晚點還要做更多測試
如果單位公司 一但採構好這樣高端硬體設備 立刻要先測試 Disk I/O並且針對確定要用的系統架構環境下做測試...要不然等到上機後再發現 恐怕會欲哭無淚...
OSSLab Geek Lab
sas disk 在 OSSLab Geek Lab Facebook 的最讚貼文
某位大大 提及硬體Raid 跟ZFS 的比較
"ZFS效能會比RAID HBA card好, 很多測試報告可以參考, 尤其是在rebuild時, 主要是ZFS看得到檔案分佈, 可以只復原有資料的部份, RAID HBA card看不到, 只能乖乖整顆復原, 在單顆硬碟越來越大的時候花費時間差異越明顯.
正常時候則因為可以對多顆硬碟同時送指令而加大存取頻寬, 若透過RAID HBA card則要等其轉譯處理, 常常瓶頸發生於此.
另外, ZFS屬於軟體RAID, 彈性較大, 例如raid-z3(可看成容許壞3顆的RAID5), 在RAID HBA card應該還沒出現..."
就OSSLab 理論跟實務維護跟救援
先要理解軟體跟硬體Raid 架構
http://www.osslab.org.tw/…/RAID_HBA%E8%88%87%E6%9E%B6%E6%A7…
RAID HBA card 轉譯就當代的 Raid ROC 在整合 Xor ,Dram cache, SAS PHY匯流排整合 (之後應該就進話到nvme) 已經不太存在bottleneck了 . 整體而言 還是會比Soft raid 快.
已知Filesystem 位置 是可以加快 Rebuild速度....但身為Date recovery從業人員,我是寧可 確定每一個block狀況, 不要只rebuild 已知FS ..畢竟也許那天有機會Data recovery 就要用...
最後一個就是硬體卡監控硬碟狀況跟設定 操作我覺得比software raid方便. 現在硬體Rebuild 時間4TB 約是3x~8x 小時..
還算合理
就Data recovery 的考量 盡量少用ZFS 的Storage Block結構
我們ZFS 應用偏向於虛擬化主機 , Disk Raid 用硬體卡 .上再建ZFS Pool,再分給cifs ,iscsi lun 再掛到本機 vsphere datastore...
http://www.napp-it.org/napp-it/all-in-one/index_en.html