Serverloses Computing in der Google Cloud
Databricks kündigt die allgemeine Verfügbarkeit von Serverless Compute für Notebooks, Workflows und Delta Live Tables an
Serverless Compute ist derzeit für schnelle Starts, Skalierung und Leistung optimiert. Benutzer werden bald in der Lage sein, auch andere Ziele wie niedrigere Kosten anzugeben
Databricks hat die allgemeine Verfügbarkeit von Serverless Compute für Notebooks, Jobs und Delta Live Tables (DLT) auf AWS und Azure angekündigt. Unternehmen schreiben den Code und sind nun in der Lage, Workloads schnell zu starten, die Skalierung der Infrastruktur zu automatisieren und nahtlose Versions-Upgrades der Databricks Runtime durchzuführen. Mit Serverless bekommen Kunden nur die geleistete Rechenarbeit berechnet im Gegensatz zu der Zeit für die Beschaffung und Initialisierung von Instanzen bei Cloud-Anbietern.
Die Konfiguration und Verwaltung von Datenverarbeitungssystemen wie Spark-Clustern war lange Zeit eine Herausforderung für Data Engineers und Data Scientists. Die Zeit, die für die Konfiguration und Verwaltung von Rechenleistung aufgewendet wird, ist Zeit, die nicht für die Wertschöpfung des Unternehmens genutzt wird. Die Auswahl des richtigen Instanztyps und der richtigen Größe ist zeitaufwändig und erfordert Experimente, um die optimale Wahl für eine bestimmte Arbeitslast zu treffen. Das Herausfinden von Cluster-Richtlinien, automatischer Skalierung und Spark-Konfigurationen verkompliziert diese Aufgabe zusätzlich und erfordert darüber hinaus Fachwissen. Sobald die Cluster eingerichtet und in Betrieb sind, muss noch Zeit für die Wartung und Abstimmung der Leistung und die Aktualisierung der Databricks Runtime-Versionen aufgewendet werden. Nur dann können Unternehmen auch von den neuen Funktionen profitieren.
Zeit, die nicht mit der Verarbeitung von Arbeitslasten verbracht wird, für die Unternehmen aber trotzdem zahlen - ist ein weiteres kostspieliges Ergebnis der Verwaltung einer eigenen Recheninfrastruktur. Während der Initialisierung und Skalierung von Rechenkapazitäten müssen Instanzen hochgefahren werden, Software, einschließlich Databricks Runtime, muss installiert werden. Unternehmen bezahlen den Cloud-Anbieter für diese Zeit. Und wenn ein Unternehmen zu viele Instanzen oder Instanztypen mit zu viel Arbeitsspeicher, CPU usw. einsetzt, wird die Rechenkapazität nicht voll ausgelastet, und dennoch zahlen sie für die gesamte bereitgestellte Rechenkapazität. Die Beobachtung dieser Kosten und Komplexität bei Millionen von Workloads war der Anlass, die Serverless Compute Innovationen zu entwickeln. (Databricks: ra)
eingetragen: 22.08.24
Newsletterlauf: 10.10.24
Sie wollen mehr erfahren?
Mit Serverless Compute entfällt die Komplexität der Delegierung von Berechtigungen über komplexe Cloud-Richtlinien und Cloud-Rollen hinweg, um den Lebenszyklus von Instanzen zu verwalten.
Databricks: Kontakt und Steckbrief
Der Informationsanbieter hat seinen Kontakt leider noch nicht freigeschaltet.