Google führt drei neue Cloud-Speicheroptionen ein: Cloud Storage FUSE, Parallelstore, NetApp Volumes

InfoQ Homepage News Google führt drei neue Cloud-Speicheroptionen ein: Cloud Storage FUSE, Parallelstore, NetApp Volumes

29. August 2023 2 Minuten Lesezeit

von

Steef-Jan Wiggers

Google hat kürzlich drei neue Cloud-Speicheroptionen auf den Markt gebracht: Cloud Storage FUSE für Anwendungen der künstlichen Intelligenz (KI), die Dateisystemsemantik erfordern, ein paralleles Dateisystem Parallelstore für anspruchsvolle KI- und HPC-Anwendungen, die GPUs verwenden, und NetApp Volumes für Unternehmensanwendungen, die in der Cloud ausgeführt werden .

Cloud Storage FUSE war bereits als Open-Source-Version verfügbar und ermöglichte den Zugriff auf Objekte in Cloud Storage-Buckets als Dateien, die als lokales Dateisystem bereitgestellt wurden. Das Unternehmen hat es mit einem neuen Maß an Portabilität, Zuverlässigkeit, Leistung und Integration für KI-Workloads erweitert. In einem Google-Blogbeitrag erklären die Autoren Marco Abela, Produktmanager, und Akshay Ram, Senior Product Manager bei Google:

Der neue Cloud Storage FUSE ist besonders wichtig für KI-Workloads. Da Anwendungen direkt auf Daten zugreifen können (anstatt sie lokal herunterzuladen), muss keine benutzerdefinierte Logik implementiert werden und es kommt zu weniger Leerlaufzeiten für wertvolle Ressourcen wie TPUs und GPUs, während die Daten kopiert werden. Darüber hinaus ermöglicht ein neuer Cloud Storage FUSE CSI-Treiber für Google Kubernetes Engine (GKE) Anwendungen das Mounten von Cloud Storage mithilfe der bekannten Kubernetes-API und wird als schlüsselfertige, von GKE verwaltete Bereitstellung angeboten.

Überblick über Cloud Storage FUSE (Quelle: Google-Blogbeitrag)

JW Davis, ein Cloud-Evangelist, kommentierte die Verfügbarkeit von FUSE-Dateisystemen in GKE in einem Tweet:

Dies scheint für viele Katastrophen prädestiniert zu sein. Nützlich für einen sehr engen Bereich von Anwendungsfällen; Die meisten werden es missbrauchen und leiden.

Zusätzlich zu Cloud Storage FUSE für KI-Anwendungen kündigt das Unternehmen eine private Vorschau eines parallelen Dateisystems namens Parallelstore an, das Benutzern hilft, keine wertvollen GPU-Ressourcen mehr zu verschwenden und gleichzeitig auf Speicher-I/Os zu warten, indem es eine leistungsstarke Lösung bereitstellt parallele Dateispeicherlösung für AI/ML- und HPC-Workloads. Die Lösung basiert auf der Distributed Asynchronous Object Storage (DAOS)-Architektur der nächsten Generation von Intel.

Sameet Agarwal, VP/GM, Storage, und Sean Derrington, Group Product Manager, Storage, erläutern in einem Google-Blogbeitrag die neuen Cloud-Speicheroptionen:

Basierend auf der Intel DAOS-Architektur der nächsten Generation haben alle Rechenknoten in einer Parallelstore-Umgebung gleichen Zugriff auf den Speicher, sodass VMs sofortigen Zugriff auf ihre Daten erhalten. Mit einer bis zu 6,3-fachen Lesedurchsatzleistung im Vergleich zu Lustre Scratch-Angeboten der Konkurrenz eignet sich Parallelstore gut für cloudbasierte Anwendungen, die extrem hohe Leistung (IOPS und Durchsatz) und extrem niedrige Latenz erfordern.

Die dritte neue Cloud-Speicheroption schließlich ist NetApp Volumes, ein vollständig von Google verwalteter, leistungsstarker Dateispeicherdienst. Diese Speicheroption ist für Unternehmen konzipiert, die ihre Anwendungen auf NetApp-Speicherarrays vor Ort in die Cloud migrieren möchten. Der Dienst bietet die Möglichkeit, Volumen von 100 GiB auf 100 TiB für maximale Skalierbarkeit zu erhöhen, ONTAP-Datenmanagement für Hybrid-Workloads zu implementieren und entweder Windows- oder Linux-Anwendungen als virtuelle Maschinen ohne Refactoring auszuführen.

Auf die Frage von InfoQ, was diese Investition von Google antreibt, sagte Derrington Folgendes:

Da KI eine entscheidende Rolle bei der Automatisierung des Datenmanagements spielt, greifen Unternehmen auf die Cloud zurück, um die richtige Speicherlösung für die richtige Anwendung bereitzustellen. Mit den neuen KI-optimierten Speicherangeboten von Google Cloud, Cloud Storage FUSE und Parallelstore, unterstützen wir Kunden bei der Anpassung an komplexe KI-Workloads, indem wir maßgeschneiderte Speicherlösungen anbieten, die Abläufe vereinfachen, Innovationen ermöglichen, Kosten senken und vieles mehr.

Cloud Storage FUSE und NetApp Volumes sind über die Google Cloud Console verfügbar, während der Parallel Store über einen Google Account Manager verfügbar ist.

Das wahre Versprechen der Cloud mit Leichtigkeit, nicht mit Kosten. DoiT bietet Technologie- und Cloud-Expertise, um Cloud-Kosten zu senken und die Produktivität der Ingenieure zu steigern. Alles von einem AWS-, Microsoft- und Google Cloud-Partner. Erfahren Sie mehr.

Das Schreiben für InfoQ hat viele Türen geöffnet und die Karrierechancen erhöht Für mich. Ich konnte mich intensiv mit Experten und Vordenkern austauschen, um mehr über die von mir behandelten Themen zu erfahren. Und ich kann meine Erkenntnisse auch an die breitere Tech-Community weitergeben und verstehen, wie die Technologien in der realen Welt eingesetzt werden.

Ich habe das Mitwirkendenprogramm von InfoQ Anfang dieses Jahres entdeckt und es seitdem genossen! Das Peer-to-Peer-Review-System von InfoQ bietet mir nicht nur eine Plattform, auf der ich meine Erkenntnisse mit einer globalen Community von Softwareentwicklern teilen kann, sondern hat auch mein Schreiben erheblich verbessert . Wenn Sie nach einem Ort suchen, an dem Sie Ihr Software-Know-how teilen können, beginnen Sie mit der Mitarbeit bei InfoQ.

Ich habe angefangen, Nachrichten für die InfoQ .NET-Warteschlange zu schreiben, um auf dem neuesten Stand der Technik zu bleiben, aber ich habe so viel mehr daraus gemacht. Ich habe sachkundige Leute kennengelernt, weltweite Sichtbarkeit erlangt und meine Schreibfähigkeiten verbessert.

Redakteur für InfoQ zu werden war eine der besten Entscheidungen meiner Karriere . Es hat mich herausgefordert und mir in vielerlei Hinsicht geholfen, zu wachsen . Wir würden uns über mehr Leute freuentrete unserem Team bei.

InfoQ sucht einen Chefredakteur in Vollzeit dem internationalen, stets remote arbeitenden Team von C4Media beizutreten. Entdecken Sie mit uns die innovativsten Technologien unserer Zeit, arbeiten Sie mit den besten Software-Experten der Welt zusammen und helfen Sie mehr als 1,6 Millionen Entwicklerteams bei der Einführung neuer Technologien und Praktiken, die die Grenzen dessen erweitern, was Software und Teams leisten können!

Jeden Dienstag wird eine Zusammenfassung der Inhalte der letzten Woche auf InfoQ verschickt. Treten Sie einer Community von über 250.000 erfahrenen Entwicklern bei. Sehen Sie sich ein Beispiel an

Wir schützen Ihre Privatsphäre.

Sie müssen ein InfoQ-Konto registrieren oder sich anmelden oder anmelden, um Kommentare zu posten. Aber hinter der Registrierung steckt noch viel mehr.

Holen Sie das Beste aus dem InfoQ-Erlebnis heraus.

Zulässiges HTML: a,b,br,blockquote,i,li,pre,u,ul,p

Zulässiges HTML: a,b,br,blockquote,i,li,pre,u,ul,p

Zulässiges HTML: a,b,br,blockquote,i,li,pre,u,ul,p