Mobile-Menu

Flash-Tier trifft Exabyte-Kapazität Hochleistungs-KI-Storage mit effizientem Object-Tiering

Von Bernhard Lück 1 min Lesedauer

Anbieter zum Thema

Scality und Weka bieten eine gemeinsam validierte Speicherlösung an. Sie verbindet Wekas NeuralMesh-Speichersystem mit dem Objektspeicher Scality Ring und richtet sich an Unternehmen mit KI- und HPC-Workloads, die hohe Durchsatzanforderungen mit Kostenkontrolle verbinden wollen.

Die Lösung von Scality und Weka biete Flash-Performance für aktive KI- und HPC-Daten sowie skalierbare, langlebige Kapazität für große Datensätze.(Bild:  © xyz+ – stock.adobe.com)
Die Lösung von Scality und Weka biete Flash-Performance für aktive KI- und HPC-Daten sowie skalierbare, langlebige Kapazität für große Datensätze.
(Bild: © xyz+ – stock.adobe.com)

Im Kern der Lösung steht der Scality Object Connector für NeuralMesh – eine Objektspeicher-Schnittstelle, die Weka im großen Maßstab validiert hat. Die Architektur hält aktive und neue Daten auf dem Flash-Tier von NeuralMesh vor und verschiebt weniger häufig genutzte Daten automatisch in den Objektspeicher von Scality Ring. Dieser skaliere laut Anbieter auf Exabyte-Dimensionen und erreiche eine Beständigkeit von bis zu 14 Neunen (99,999999999999 %).

Gegenüber herkömmlichen S3-Schnittstellen habe der Connector in internen Tests auf vergleichbarer Hardware eine bis zu zehnfach höhere Performance erzielt. Die Infrastrukturkosten, so die Partner, seien dabei um bis zu 20 Prozent niedriger gewesen als bei traditionellen Objektspeicher-Integrationen.

Scality und Weka positionieren ihre gemeinsame Lösung auch als Alternative zu Community-basierten Objektspeichern wie Ceph. Der speziell für NeuralMesh entwickelte Connector biete eine einfachere Administration, höhere Zuverlässigkeit und Enterprise-Support – ohne dass Anpassungen auf Kundenseite erforderlich seien.

Für KI-Pipelines verspricht die Kombination eine bessere GPU-Auslastung sowie eine verkürzte „Time-to-first-Token“, also die Latenz bis zur ersten Ausgabe eines Sprachmodells.

Aktuelles eBook

Storage für HPC & KI

eBook Storage für HPC & KI
eBook „Storage für HPC & KI“
(Bild: Storage-Insider)

Speichersysteme für das HPC und für die verschiedenen Disziplinen der KI sind hohen Anforderungen ausgesetzt. Denn sie müssen enorme Datenmengen in kürzester Zeit bereitstellen oder sammeln. Wie können diese Herausforderungen gemeistert werden?

Die Themen im Überblick:

  • Aktuelle Trends in der Künstlichen Intelligenz
  • High-Performance Computing – Explosion der Innovationen
  • Künstliche Intelligenz – nahezu Echtzeit-Datenverarbeitung

(ID:50766394)

Jetzt Newsletter abonnieren

Täglich die wichtigsten Infos zu Data-Storage und -Management

Mit Klick auf „Newsletter abonnieren“ erkläre ich mich mit der Verarbeitung und Nutzung meiner Daten gemäß Einwilligungserklärung (bitte aufklappen für Details) einverstanden und akzeptiere die Nutzungsbedingungen. Weitere Informationen finde ich in unserer Datenschutzerklärung. Die Einwilligungserklärung bezieht sich u. a. auf die Zusendung von redaktionellen Newslettern per E-Mail und auf den Datenabgleich zu Marketingzwecken mit ausgewählten Werbepartnern (z. B. LinkedIn, Google, Meta).

Aufklappen für Details zu Ihrer Einwilligung