Zum Hauptinhalt springen

Hadoop-Lösungen für Big Data

Supermicro und Cloudera Lösungen

Die Herausforderung

Durch die sich ständig verändernden Anwendungen entsteht eine enorme Menge an Informationen, die von strukturierten, unstrukturierten bis hin zu halbstrukturierten Daten reichen. Die herkömmliche IT-Infrastruktur ist nicht für die Vielfalt, Geschwindigkeit und Menge der Daten ausgelegt, die von sozialen Netzwerken, mobilen Anwendungen, maschinellen Sensoren und wissenschaftlichen Forschungen usw. erzeugt werden. Für Unternehmen ist die Nutzung von Big-Data-Analysen nicht mehr eine Frage des Wann, sondern des Wie. Hadoop, das für die kosteneffiziente Speicherung und Verarbeitung großer Datenmengen entwickelt wurde, ist für diesen Zweck wie geschaffen. Es kann linear bis zu Tausenden von Servern und Petabytes an Speicherplatz skaliert werden.

Die Frage, wie man die Vorteile der Hadoop-Technologie nutzen und sich einen Wettbewerbsvorteil verschaffen kann, beschäftigt fast jeden CIO eines Unternehmens. Für Unternehmen bedeutet die Frage, wie sie die Hadoop-Infrastruktur effizient einsetzen können, dass sie in der großen Schlacht um Marktanteile gewinnen oder verlieren. Unternehmen, die Hadoop-Lösungen einsetzen, wenden oft große Mengen an Ressourcen für die Suche nach der besten Architektur und dem fähigsten Lösungsanbieter auf. An dieser Stelle kommt Supermicro ins Spiel und hilft.

Die Lösung

Wir stellen Supermicro Hadoop-Cluster vor, eine Reihe von optimierten Big-Data-Lösungen, die hohe Leistung, hohe Zuverlässigkeit und hohe Skalierbarkeit bieten. Supermicro Hadoop Lösungen sind voll integrierte, vollständig optimierte und komplett getestete schlüsselfertige Cluster mit flexiblen Support-Paketen, die kundenspezifische Anforderungen erfüllen.

Supermicro Hadoop-Cluster verfügen über industrieerprobte Compute- und Storage-Server mit hoher Dichte, die mit den besten Komponenten ausgestattet sind, die durch umfangreiche technische Entwicklung, Validierung und Tests ausgewählt wurden. Zertifizierte Konfigurationen nehmen dem Design und der Bereitstellung einer wirklich skalierbaren Big-Data-Rechen- und Speicherinfrastruktur, die den anspruchsvollsten Unternehmens-IT- und Rechenzentrumsumgebungen gerecht wird, die Arbeit ab.

Supermicro

  • Von Grund auf mit optimalen Server- und Clusterkonfigurationen entwickelt, die eine Vielzahl von Arbeitslasten abdecken
  • Bewährte Lösungen auf der Grundlage umfangreicher Labortests und groß angelegter Produktionseinsätze
  • Erzielen Sie das beste Preis-/Leistungsverhältnis und das beste Preis-/Kapazitätsverhältnis mit branchenführenden Server- und Speicherplattformen
  • Schlüsselfertige End-to-End-Hadoop-Cluster mit vollständig integrierter HW, SW und globalem Support
  • Fortschrittliche Architektur auf der Grundlage neuester Technologien wie SkyLake CPUs, SAS3, NVMe, Optane-Laufwerke 
  • Verbesserte Netzwerkleistung und Redundanz mit dualen 10GbE / 25GbE / 40GbE / 100GbE Optionen
  • Automatisierte, vollständige Clustertests garantieren Qualität und Liefertermin

Vollständig integrierter Hadoop-Cluster

Hauptmerkmale und Vorteile:

  • Speziell entwickelte Clusterkonfigurationen, die für Kapazität, Rechenleistung oder IO-Leistung optimiert sind
  • Hohe Verfügbarkeit Name Node Design ohne Single Point of Failure
  • Große Speicheroptionen, die speziell für Spark und andere In-Memory-Berechnungen mit geringer Latenz entwickelt wurden
  • Hyper für extrem große Bereitstellungen
  • Hohe Dichte bei Rechen-, Speicher- und Arbeitsspeicherdesign für beste Effizienz und niedrigste TCO
  • Flexible Netzwerk-Switch-Optionen mit 1 oder 2x 10G / 25G / 100G Switches pro Rack.
  • Kostengünstiges 14U-Rack-Design, ideal für Proof-of-Concept-Testumgebung
  • Standardmäßiges 42U-Rack-Design und flexible PDU-Optionen, die für jede Rechenzentrumsumgebung geeignet sind
  • Effizienz bis zum Titanium Level (96%+) - Redundante Stromversorgungen mit PMBus
  • Integriert mit IPMI und SMC OOB (out of band management) Suite für automatisiertes Cluster-Management
  • Vollständig integriert, vollständig konfiguriert und vollständig getestet mit Hadoop-Distributionen Ihrer Wahl
  • Proof-of-Concept-Testcluster für risikofreie Kauferfahrung verfügbar
Supermicro voll integrierte Hadoop-Cluster-Lösung Rack
  • 1 oder 2x 48 Anschlüsse 10G SFP+ / 10GBase-T / 25GbE
    1 oder 2x 32 Port 100GbE, 1x 48 Port Switch, GbE
  • 1x Management-Knoten 1U UP Skylake 41xx / 51xx
  • 3x Name Nodes 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • Optimierte Datenknoten 2U SSG, 2U BigTwin oder 4U FatTwin mit Skylake 41xx / 51xx / 61xx / 81xx Prozessoren, Dual 10G / 25G / 40G pro Knoten, 2,5" und 3,5" HDD Optionen
  • Standard 42U-Rack mit gemessenen PDUs, Rack-Anpassungsoptionen verfügbar
  • Der Integrationsservice umfasst das vollständige Einbrennen und Testen des Clusters, die Aktualisierung von BIOS und FW, die Netzwerkkonfiguration, die Vorinstallation der Hadoop-Distribution Ihrer Wahl und die vollständige Cluster-Installation.

Technische Spezifikationen des Hadoop-Clusters

 Hohe KapazitätIO-optimiertHohe RechendichteAusgewogene
ModellSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
DatenknotenSSG-6029P-E1CR24LSYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
Datenknoten (Anzahl)18323637
Formfaktor2U SuperStorage2U BigTwin4U FatTwin1U SuperStorage
2x SKL 4114 2P 10C/20T 2.2G 85W2x SKL 5118 4/2P 12C/24T 2.3G 105W2x SKL 6130 4/2P 16C/32T 2.1G 125W2x SKL 5118 4/2P 12C/24T 2.3G 105W
128GB192GB256 GB128GB
24 Buchten 3,5"6 Buchten 2,5"8 Schacht 3,5"12 Buchten 3,5"
Total Data Drive432448 (NVMe)*288444
Kerne insgesamt3607681152888
GesamtspeicherWert2.3TB6.144TB9.2TB4.7TB
Gesamtspeicher3,45PB (8TB)1.792PB (4TB)1,15PB (4TB)2,66PB (6TB)
Name Knoten3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
Schalter1x 48PT 25GBase-T2x 32PT 40G1x 48PT GbE1x 48PT10G SFP+
Schrank (B x H x T)42U
23,5 x 82,4 x 48
PDDual2x 50A 208 3-Phasen-PDU mit Zähler
*ADD 32 2,5"-Laufwerke x8 JBOF = 256 NVMe

Server-Spezifikationen

  • Unternehmensdatenbank, Datenbankverarbeitung und -speicherung, Unternehmensserver, HPC, Rechenzentrum, iSCSI SAN
  • Unterstützung für zwei Sockel P (LGA 3647): Intel® Xeon® Scalable Prozessoren; 3 UPI bis zu 10.4GT/s
  • 24 DIMM-Steckplätze; bis zu 3TB ECC 3DS LRDIMM oder RDIMM DDR4 2400MHz
  • 24 Hot-swap 3,5" SAS3/SATA3-Laufwerkseinschübe, 2 Hot-swap 2,5" Laufwerkseinschübe (hinten); SAS3 über Broadcom 3008 AOC
  • 2 PCI-E 3.0 x16 und 1 PCI-E 3.0 x8 Steckplätze
  • 1 Dedizierter IPMI-Anschluss
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Typ A
  • 5 redundante Hot-Swap 80mm PWM-Lüfter
  • 1600W Redundante Titanium Level (96%) Stromversorgungen
  • 4 DP-Knoten in 2U; Tiefe 28,5", Jeder Knoten:
  • Unterstützung für zwei Sockel P (LGA 3647): Intel® Xeon® Scalable Prozessoren; Dual UPI bis zu 10,4 GT/s
  • 24 DIMMs; bis zu 3TB ECC 3DS LRDIMM oder RDIMM DDR4-2666MHz
  • 6 Hot-Swap-2,5"-NVMe-Laufwerksschächte pro Knoten
  • 2 PCI-E 3.0 x16 Low-Profile-Steckplätze, Unterstützung für 1 Netzwerk-SIOM-Karte
  • 1 dedizierter IPMI-Anschluss, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 leistungsstarke 80-mm-Lüfter mit optimaler Steuerung der Lüftergeschwindigkeit
  • 2200W Redundante Titanium Level (96%) Stromversorgungen
  • FatTwin™ Server; JEDER NODE (x4 Hot-Plug-Systemknoten):
  • Unterstützung für zwei Sockel P (LGA 3647): Intel® Xeon® Scalable Prozessoren; Dual UPI bis zu 10,4 GT/s
  • 12 DIMMs; bis zu 1,5 TB ECC 3DS LRDIMM, bis zu DDR4-2666MHz
  • 8x 3,5" SAS3 oder 6 SAS3 + 2 opt. NVMe U.2; SAS3 mit Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM: flexibles Netzwerk opt.)
  • 1 dedizierter IPMI-Anschluss, 1 VGA, 2 USB 3.0, 1 M.2-Unterstützung
  • 2x 8cm 14k RPM mittlere Lüfter
  • 1200W Redundante Titanium Level (96%) Stromversorgungen
  • Speicher mit hoher Dichte, Objektspeicher 1U, Ceph / Hadoop, Scale-out-Speicher, Big Data-Analyse
  • Unterstützung für zwei Sockel P (LGA 3647): Intel® Xeon® Scalable Prozessoren der 2. Generation; Dual UPI bis zu 10,4 GT/s
  • 12 Hot-swap 3,5" SAS3/SATA3-Laufwerksschächte, 4 Hot-swap 2,5" NVMe/SATA-Laufwerksschächte
  • 12 DIMMs; bis zu 3TB 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Unterstützt Intel® Optane™ DCPMM*
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2x 10GBase-T-Anschlüsse über Intel C622, 1 dedizierter IPMI-Anschluss
  • 1 VGA, 4 USB 3.0, 1 TPM-Anschluss
  • 6x 4cm 20.5K RPM Lüfter
  • Redundante 600-W-Stromversorgungen der Platinstufe

*Kontaktieren Sie Ihren Supermicro-Vertriebsmitarbeiter für weitere Informationen.

  • Layer 2/3 Ethernet Switching, Link Aggregation (LACP), Jumbo Frames, VLAN-Unterstützung
  • Flexibilität bei der Konfiguration:
    • SSE-G24-TG4 - 24 RJ45-Ports für 1-Gbit/s-Ethernet mit 4 SFP-Combo-Ports, 4 Ports für 10-Gbit/s-Ethernet (CX4, XFP oder SFP+), Stacking
    • SSE-G48-TG4 - 48 RJ45-Ports für 1-Gbit/s-Ethernet mit 4 SFP-Combo-Ports, 4 Ports für 10-Gbit/s-Ethernet (CX4, XFP oder SFP+), Stacking
    • SSE-X24S / SSE-X3348S(R) - 24 Ports 10Gbps Ethernet (SFP+), Option für umgekehrten Luftstrom
  • Verwaltung: Webbasierte Verwaltungsschnittstelle, Industriestandard-CLI mit Telnet-SSH oder lokalem Verwaltungsport, Skripting, Protokollierung
  • Leitweglenkung, Multicast:
    • Dienstgüte und DiffServ - 8 Prioritätswarteschlangen pro Anschluss; angepasstes WRR und striktes Prioritäts-Scheduling
    • Sicherheit - 802.1x portbasierte Authentifizierung, RADIUS- und TACACS+-Authentifizierung, SSH/SSL-Verschlüsselung
  • Abmessungen: 17,3 "B x 15,2 "T x 1,7 "H (440mm x 386mm x 43mm)
SSE-C3632S

/ SSE-C3632SR(32 Anschlüsse)

  • 32x Ein-Hundert-Gigabit-Ethernet-Ports
    (jeweils optional konfiguriert für vierzig Gigabit oder 4x fünfundzwanzig Gigabit)
  • Layer-3-Routing mit Drahtgeschwindigkeit
  • 1:1 Nicht-blockierende Konnektivität
  • 1U-Formfaktor für flexible Installation
  • Rechenzentrumsfreundlich - Modelle mit normalem und umgekehrtem Luftstrom
  • Redundante hot-plug-fähige Netzteile
  • Bare Metal - ONIE Installiert
  • Cumulus Linux-fähig
  • HW-Fehlermeldungen - E-Mail oder SNMP
  • Redundanter Zugang für die Verwaltung
  • Unterstützung für offene Standards (SMASH 2.0, LDAP, WSMAN)
  • VLAN-Unterstützung
  • KVM und Virtual Media und SOL (keine zusätzliche Lizenz erforderlich)
  • Einfache Wartung (Befehlszeilen-Flash-Tools zur Aktualisierung der Firmware)

Supermicro Integrations- und Konzeptnachweis-Labordienstleistungen

Siehe Details