Mobile-Menu

Neues eBook „Storage für HPC & KI“ Die Ansprüche steigen – und der Wandel hat erst begonnen

Von Michael Matzer 2 min Lesedauer

Anbieter zum Thema

FAST LTA GmbH
Impossible Cloud GmbH

Speichersysteme für das High-Performance Computing und für die verschiedenen Disziplinen der „Künstlichen Intelligenz“ (Machine Learning, Reinforcement Learning, Deep Learning und so weiter) sind hohen Anforderungen ausgesetzt. Sie müssen enorm große Datenmengen in kürzester Zeit bereitstellen oder sammeln. Für viele Marktbeobachter sind heute KI und HPC synonym, weil viele KI-Workloads auf Superrechnern laufen.

Speichersysteme für HPC und Künstliche Intelligenz sind hohen Anforderungen ausgesetzt. Unser kostenfreies eBook bietet einen Überblick.(Bild: © CROCOTHERY - stock.adobe.com /Vogel IT-Medien)
Speichersysteme für HPC und Künstliche Intelligenz sind hohen Anforderungen ausgesetzt. Unser kostenfreies eBook bietet einen Überblick.
(Bild: © CROCOTHERY - stock.adobe.com /Vogel IT-Medien)

Dieses eBook zeigt Ihnen, inwiefern sich die Anforderungen der beiden IT-Fachgebiete unterscheiden und in den vergangenen sechzig Jahren entwickelt haben. Vor etwa zehn Jahren wurde der „KI-Winter“ überwunden, weil sehr große und sehr schnelle Superrechner gebaut und von entsprechenden Programmen ausgenutzt werden konnten. Seitdem haben sich zahlreiche Nutzanwendungen im KI-Umfeld herauskristallisiert, darunter die Wettervorhersage, die Berechnung des Klimawandels, das Risikomanagement an den Börsen – und natürlich Chatbots, die auf Large Language Models (LLMs) basieren.

LLMs sind ein gutes Beispiel dafür, wie rasch die Modelle für KI-Anwendungen expandieren können. Wo vor wenigen Jahren noch 500 Millionen Parameter im Modell ausreichten, stößt die neueste LLM-Generation in die Region von 500 Milliarden Parametern vor. Das dürfte noch längst nicht das Ende der Fahnenstange sein.

Hier können Sie das neue eBook „Storage für HPC & KI“ kostenlos herunterladen.

Entsprechend rasch erhöht sich der Speicherbedarf für moderne HPC- und KI-Anwendungen. Eine hohe Kapazität ist schon mit 1 Petabyte erreicht, doch für die genannten LLM-Modelle wird mindestens ein Exabyte benötigt. Entsprechend hoch muss die Skalierbarkeit des Speichersystems ausgelegt sein. Meta, das vormalige Facebook, baut zusammen mit Pure Storage einen Supercluster mit mindestens 1 Exabyte.

Die zweite Anforderung besteht in hohem Datendurchsatz und maximaler Lesegeschwindigkeit. Diese Anforderung hat weitreichende Auswirkungen auf die Architektur des Systems und auf die verwendeten Speichermedien.

All diese Aspekte werden in diesem eBook vorgestellt, erläutert und wenn möglich beurteilt. Sowohl für HPC als auch KI werden führende Hersteller und ihre Produkte vorgestellt, und für KI gibt es sogar einen Kostenrechner online.

Die Nutzung der „niederen KI“ hat, im Gegensatz zu „höheren KI“ gerade erst an Fahrt aufgenommen, und in der modernen HPC-Landschaft sind die ersten Exascale-Superrechner kürzlich in Betrieb genommen worden. Das zeigt, dass große Veränderungen erst noch bevorstehen. Dieser Wandel ist kein Anlass zur Sorge, sondern wird der Industrie wie auch der Menschheit helfen, globale Herausforderungen besser bewältigen zu können.

Hier können Sie das neue eBook „Storage für HPC & KI“ kostenlos herunterladen.

(ID:49614618)

Jetzt Newsletter abonnieren

Täglich die wichtigsten Infos zu Data-Storage und -Management

Mit Klick auf „Newsletter abonnieren“ erkläre ich mich mit der Verarbeitung und Nutzung meiner Daten gemäß Einwilligungserklärung (bitte aufklappen für Details) einverstanden und akzeptiere die Nutzungsbedingungen. Weitere Informationen finde ich in unserer Datenschutzerklärung. Die Einwilligungserklärung bezieht sich u. a. auf die Zusendung von redaktionellen Newslettern per E-Mail und auf den Datenabgleich zu Marketingzwecken mit ausgewählten Werbepartnern (z. B. LinkedIn, Google, Meta).

Aufklappen für Details zu Ihrer Einwilligung

Weiterführende Inhalte