Giải pháp khai thác dữ liệu Hadoop của Supermicro

Logo Cloudera®Logo của Hortonworks®

Các thách thức

Có một lượng thông tin khổng lồ được thúc đẩy bởi các ứng dụng luôn thay đổi, từ dữ liệu có cấu trúc, không cấu trúc, đến dữ liệu bán cấu trúc. Cơ sở hạ tầng CNTT thông thường không được xây dựng để xử lý sự đa dạng, vận tốc và khối lượng dữ liệu được tạo bởi các mạng truyền thông xã hội, ứng dụng di động, cảm biến máy và nghiên cứu khoa học, v.v. Đối với các doanh nghiệp, việc sử dụng phân tích dữ liệu lớn không còn là vấn đề khi nào là một câu hỏi như thế nào Hadoop, được thiết kế để lưu trữ và xử lý khối lượng dữ liệu lớn, được sinh ra cho mục đích này. Nó có thể mở rộng tuyến tính lên đến hàng ngàn máy chủ và petabyte dung lượng lưu trữ.

Làm thế nào để tận dụng lợi thế của công nghệ Hadoop và có được lợi thế cạnh tranh là tâm trí của hầu hết mọi CIO doanh nghiệp. Đối với các doanh nghiệp, làm thế nào để triển khai cơ sở hạ tầng Hadoop một cách hiệu quả có nghĩa là thắng hay thua trong cuộc chiến lớn về thị phần. Các doanh nghiệp triển khai các giải pháp Hadoop thường dành một lượng lớn tài nguyên để tìm kiếm kiến ​​trúc tốt nhất và nhà cung cấp giải pháp có khả năng nhất. Đây là nơi Supermicro đến để giúp đỡ.

Giải pháp

Giới thiệu các cụm Supermicro Hadoop, một loạt các giải pháp dữ liệu lớn được tối ưu hóa cung cấp hiệu suất cao, độ tin cậy cao và khả năng mở rộng cao. Các giải pháp Supermicro Hadoop được tích hợp đầy đủ, tối ưu hóa hoàn toàn và các cụm chìa khóa trao tay được thử nghiệm hoàn toàn với các gói hỗ trợ linh hoạt có sẵn để đáp ứng các yêu cầu cụ thể của khách hàng.

Các cụm Supermicro Hadoop có các máy chủ lưu trữ và tính toán mật độ cao đã được chứng minh với các thành phần giống tốt nhất được lựa chọn thông qua thiết kế kỹ thuật mở rộng, xác nhận và thử nghiệm. Các cấu hình được chứng nhận giúp đoán ra việc thiết kế và triển khai cơ sở hạ tầng lưu trữ và tính toán Big Data thực sự có thể mở rộng, đáp ứng các môi trường trung tâm dữ liệu và CNTT doanh nghiệp đòi hỏi khắt khe nhất.

Lợi thế của Supermicro

  • Được thiết kế từ nền tảng với cấu hình máy chủ và cụm tối ưu đáp ứng nhiều khối lượng công việc khác nhau
  • Các giải pháp đã được chứng minh dựa trên thử nghiệm rộng rãi trong phòng thí nghiệm và triển khai sản xuất quy mô lớn
  • Đạt được giá / hiệu suất tốt nhất và giá / dung lượng tốt nhất với các nền tảng máy chủ và lưu trữ hàng đầu trong ngành
  • Các cụm Hadoop chìa khóa trao tay đầu cuối với tích hợp hoàn toàn CTNH, SW và Hỗ trợ toàn cầu
  • Kiến trúc nâng cao dựa trên các công nghệ mới nhất như CPU ​​SkyLake, SAS3, NVMe, Ổ đĩa Optane
  • Hiệu suất và dự phòng mạng nâng cao với các tùy chọn 10GbE / 25GbE / 40GbE / 100GbE kép
  • Tự động kiểm tra cụm đầy đủ đảm bảo xây dựng chất lượng và tiến độ giao hàng

Cụm Hadoop tích hợp đầy đủ

 

Các tính năng và lợi ích chính:

  • Mục đích cấu hình cụm được xây dựng tối ưu hóa cho hiệu suất công suất, tính toán hoặc IO
  • Tên sẵn sàng cao Thiết kế nút không có điểm thất bại duy nhất
  • Tùy chọn bộ nhớ lớn được thiết kế dành riêng cho Spark và khác trong bộ nhớ, tính toán độ trễ thấp
  • Nền tảng máy chủ Hyper-Scale được thiết kế để triển khai cực kỳ lớn
  • Thiết kế tính toán, lưu trữ và bộ nhớ mật độ cao để đạt được hiệu quả tốt nhất và TCO thấp nhất
  • Tùy chọn chuyển đổi mạng linh hoạt với các công tắc 1 hoặc 2x 10G / 25G / 100G trên mỗi giá.
  • Chi phí thiết kế giá 14U hiệu quả, lý tưởng cho môi trường thử nghiệm Proof of Concept
  • Thiết kế giá 42U tiêu chuẩn và các tùy chọn PDU linh hoạt đáp ứng mọi môi trường trung tâm dữ liệu
  • Hiệu suất lên tới mức Titan (96% +) – Nguồn cung cấp năng lượng dự phòng với PMBus
  • Được tích hợp với bộ IPMI và SMC OOB (ngoài quản lý băng tần) để quản lý cụm tự động
  • Tích hợp đầy đủ, cấu hình đầy đủ và được kiểm tra hoàn toàn với các bản phân phối Hadoop mà bạn chọn
  • Cụm thử nghiệm Proof of Concept có sẵn cho trải nghiệm mua hàng không có rủi ro
Giá đỡ giải pháp cụm Hadoop
  • 1 hoặc 2x 48 cổng 10G SFP + / 10GBase-T / 25GbE
    1 hoặc 2x 32 cổng 100GbE, Chuyển đổi cổng 1x 48, GbE
  • 1x Quản lý node 1U UP Skylake 41xx / 51xx
  • 3x  Node 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • Các nút dữ liệu được tối ưu hóa 2U SSG, 2U BigTwin hoặc 4U FatTwin với Skylake 41xx / 51xx / 61xx / 81xx, bộ xử lý 10G / 25G / 40G mỗi nút, tùy chọn ổ cứng 2,5 “và 3,5”
  • Tủ rack 42U tiêu chuẩn với PDU kiểm soát nguồn, tùy chỉnh khung giá đỡ có sẵn
  • Dịch vụ tích hợp bao gồm toàn bộ cụm Burn-in và thử nghiệm, cập nhật BIOS và FW, cấu hình mạng, phân phối lựa chọn Hadoop trước cài đặt và cụm đầy đủ

Thông số kỹ thuật của cụm Hadoop

 

Công suất cao Tối ưu hóa IO Mật độ cao tính toán Cân bằng
Mô hình SKU SRS-HCSG18-HADP-01 SRS-IOBT32-HADP-01 SRS-HDFT36-HADP-01 SRS-BLSG37-HADP-01
Nút dữ liệu SSG-6029P-E1CR24L SYS-2029BT-HNR SYS-F629P3-RC0B SSG-6019P-ACR12L
Nút dữ liệu (Số lượng) 18 32 36 37
Dạng Thiết kế 2U SuperStorage 2U BigTwin 4U FatTwin 1U SuperStorage
2x SKL 4114 2P 10C / 20T 2.2G 85W 2x SKL 5118 4 / 2P 12C / 24T 2.3G 105W 2x SKL 6130 4 / 2P 16C / 32T 2.1G 125W 2x SKL 5118 4 / 2P 12C / 24T 2.3G 105W
128GB 192GB 256GB 128GB
24 Bay 3,5 “ 6 Bay 2,5 “ 8 Bay 3,5 “ 12 Bay 3,5 “
Tổng ổ dữ liệu 432 448 (NVMe) * 288 444
Tổng số nhân 360 768 1152 888
Tổng bộ nhớ 2,3TB 6.144TB 9,2TB 4,7TB
Tổng dung lượng 3,45PB (8TB) 1.792PB (4TB) 1,15PB (4TB) 2,66PB (6TB)
Tên nút 3x 1U WIO 3x 1U WIO 3x 1U WIO 3x 1U WIO
chuyển mạch 1x 48PT 25GBase-T 2x 32PT 40G 1x 48PT GbE 1x 48PT10G SFP +
Tủ (W x H x D) 42U
23,5 x 82,4 x 48
PDU 2x 50A 208 PDU kiểm soát nguồn 3 pha
* THÊM 32 Bay 2.5 “Ổ đĩa x8 JBOF = 256 NVMe

Thông số máy chủ

SSG-6029P-E1CR24L

SSG-6029P-E1CR24L

  • Cơ sở dữ liệu doanh nghiệp, Xử lý và lưu trữ cơ sở dữ liệu, Máy chủ doanh nghiệp, HPC, Trung tâm dữ liệu, iSCSI SAN
  • Hỗ trợ Dual socket P (LGA 3647): Bộ xử lý Intel® Xeon® có thể mở rộng; 3 UPI lên tới 10,4GT / giây
  • 24 khe DIMM; lên đến 3TB ECC 3DS LRDIMM hoặc RDIMM DDR4 2400 MHz
  • 24 vịnh ổ đĩa trao đổi nóng 3,5 “SAS3 / SATA3, 2 vịnh ổ đĩa trao đổi nóng 2,5” (phía sau); SAS3 qua Broadcom 3008 AOC
  • 2 khe cắm PCI-E 3.0 x16 và 1 khe cắm PCI-E 3.0 x8
  • 1 cổng IPMI chuyên dụng
  • 1 VGA, 1 COM, 2 USB 3.0, 1 loại A
  • 5 Quạt làm mát dự phòng 80mm trao đổi nóng
  • Cấp titan dự phòng 1600W (96%)
SYS-2029BT-HNR

SYS-2029BT-HNR

  • 4 nút DP trong 2U; độ sâu 28,5 “, mỗi nút:
  • Hỗ trợ Dual socket P (LGA 3647): Bộ xử lý Intel® Xeon® có thể mở rộng; UPI kép lên tới 10,4GT / s
  • 24 DIMM; lên đến 3TB ECC 3DS LRDIMM hoặc RDIMM DDR4‑2666MHz
  • 6 Ổ đĩa NVMe trao đổi nóng 2,5 “cho mỗi nút
  • 2 khe cắm cấu hình thấp PCI-E 3.0 x16, hỗ trợ 1 thẻ SIOM kết nối mạng
  • 1 cổng IPMI chuyên dụng, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 quạt nặng 80mm với điều khiển tốc độ quạt tối ưu
  • Cấp titan dự phòng 2200W (96%)
SYS-F629P3-RC0B

SYS-F629P3-RC0B

  • Máy chủ FatTwin ™; MACHI NODE (Nút hệ thống cắm nóng x4):
  • Hỗ trợ Dual socket P (LGA 3647): Bộ xử lý Intel® Xeon® có thể mở rộng; UPI kép lên tới 10,4GT / s
  • 12 DIMM; lên đến 1,5TB ECC 3DS LRDIMM, tối đa DDR4‑2666 MHz
  • 8,9 3,5 “SAS3 hoặc 6 SAS3 + 2 opt. NVMe U.2; SAS3 với Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM: tùy chọn mạng linh hoạt.)
  • 1 cổng IPMI chuyên dụng, 1 VGA, 2 USB 3.0, hỗ trợ 1 M.2
  • Quạt trung gian 2x 8cm 14k RPM
  • Cấp titan dự phòng 1200W (96%)
SSG-6019P-ACR12L

SSG-6019P-ACR12L

  • Lưu trữ mật độ cao, Lưu trữ đối tượng 1U, Ceph / Hadoop, Lưu trữ mở rộng quy mô, Phân tích dữ liệu lớn
  • Hỗ trợ Ổ cắm kép P (LGA 3647): Bộ xử lý Intel® Xeon® có thể mở rộng thế hệ 2; UPI kép lên tới 10,4GT / s
  • 12 vịnh ổ đĩa trao đổi nóng 3,5 “SAS3 / SATA3, 4 vịnh ổ đĩa hoán đổi 2,5” NVMe / SATA
  • 12 DIMM; lên đến 3TB 3DS ECC DDR4-2933 MHz RDIMM / LRDIMM
  • Hỗ trợ Intel® Optane ™ DCPMM *
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2x cổng 10GBase-T qua Intel C622, 1 cổng IPMI chuyên dụng
  • 1 VGA, 4 USB 3.0, 1 tiêu đề TPM
  • Quạt làm mát 6x 4cm 20,5K RPM
  • Bộ nguồn cấp bạch kim dự phòng 600W

* Liên hệ với đại diện bán hàng Supermicro của bạn để biết thêm.

Thiết bị chuyển mạch Ethernet 1Gb & 10Gb

Thiết bị chuyển mạch Ethernet 1Gb & 10Gb

  • Chuyển mạch Ethernet lớp 2/3, tập hợp liên kết (LACP), khung Jumbo, hỗ trợ Vlan
  • Cấu hình linh hoạt:
    • SSE-G24-TG4 – 24 cổng Ethernet 1Gbps Ethernet với 4 cổng Combo SFP, 4 cổng Ethernet 10Gbps (CX4, XFP hoặc SFP +), Xếp chồng
    • SSE-G48-TG4 – 48 cổng Ethernet 1Gbps Ethernet với 4 cổng Combo SFP, 4 cổng Ethernet 10Gbps (CX4, XFP hoặc SFP +), Xếp chồng
    • SSE-X24S / SSE-X3348S (R) – 24 – 48 cổng Ethernet 10Gbps (SFP +), tùy chọn luồng khí ngược
  • Quản lý: Giao diện quản lý dựa trên web, CLI tiêu chuẩn công nghiệp với telnet SSH hoặc cổng quản lý cục bộ, Scripting, Logging
  • Định tuyến, đa tuyến:
    • Chất lượng dịch vụ và DiffServ – 8 hàng đợi ưu tiên trên mỗi cổng; Điều chỉnh WRR và lập kế hoạch ưu tiên nghiêm ngặt
    • Bảo mật – Xác thực dựa trên cổng 802.1x, xác thực RADIUS và TACACS +, mã hóa SSH / SSL
  • Kích thước: 17,3 “W x 15,2” D x 1,7 “H (440mm x 386mm x 43mm)
Cloudera được chứng nhậnĐối tác công nghệ được chứng nhận của Hortonworks
SSE-C3632S

SSE-C3632SSSE-C3632SR  (32 cổng)

  • Các cổng Ethernet một trăm trăm Gigabit
    (Mỗi cổng được định cấu hình tùy chọn cho bốn mươi gigabit hoặc 4x hai mươi lăm gigabit)
  • Định tuyến lớp 3 tốc độ dây
  • Kết nối không chặn 1: 1
  • Hệ số dạng 1U để cài đặt linh hoạt
  • Trung tâm dữ liệu thân thiện – mô hình luồng khí thường xuyên và đảo ngược
  • Nguồn cung cấp nóng cắm dự phòng
  • Kim loại trần – Đã cài đặt ONIE
  • Cumulus Linux có khả năng
Quản lý máy chủ IPMI

Quản lý máy chủ IPMI

  • Thông báo lỗi CTNH – E-mail hoặc SNMP
  • Truy cập dự phòng cho quản lý
  • Hỗ trợ các tiêu chuẩn mở (SMASH 2.0, LDAP, WSMAN)
  • Hỗ trợ Vlan
  • KVM và Virtual Media và SOL (không cần giấy phép bổ sung)
  • Bảo trì dễ dàng (Công cụ flash dòng lệnh để cập nhật firmware)
   Liên hệ tư vấn giải pháp    
1900 558879     solution@nhattienchung.vn