Sie sind hier: Startseite » Markt » Unternehmen

Offener Standard für Data Lakes werden


Speicherung und Verarbeitung großer Datenmengen sowohl vor Ort als auch in der Cloud: Das Delta Lake Projekt wird an die Linux Foundation übergeben
Das zunehmende Engagement der Community zeigt die Begeisterung für Open Source und fördert branchenweite Innovationen für datengesteuerte Initiativen


Die Linux Foundation, die gemeinnützige Organisation, die Masseninnovationen durch Open Source ermöglicht, gab bekannt, dass sie Delta Lake hosten wird, ein Projekt, das sich auf die Verbesserung der Zuverlässigkeit, Qualität und Leistung von Data Lakes konzentriert. Delta Lake wurde von Tausenden von Organisationen übernommen und verfügt über ein florierendes Ökosystem von Unterstützern, darunter Intel, Alibaba und Booz Allen Hamilton. Um die Akzeptanz und die Beiträge zur Weiterentwicklung weiter zu steigern, wird Delta Lake zu einem Linux Foundation-Projekt und einem offenen Governance-Modell.

Jedes Unternehmen strebt danach, durch Data Science, Machine Learning und Analytics mehr Werte aus Daten zu ziehen, aber sie werden massiv durch die mangelnde Datensicherheit in den Data Lakes behindert. Delta Lake löst Herausforderungen bei der Datenzuverlässigkeit, indem es die Transaktionen ACID-konform macht und gleichzeitiges Lesen und Schreiben ermöglicht. Seine Fähigkeit zur Durchsetzung von Schemas trägt dazu bei, dass der Data Lake frei von korrupten und nicht konformen Daten ist. Seit seiner Einführung im Oktober 2017 wurde Delta Lake von über 4.000 Unternehmen angenommen und verarbeitet jeden Monat über zwei Exabyte an Daten.

"Delta Lake unter das neutrale Haus der Linux Foundation zu bringen, wird der vom Projekt abhängigen Open-Source-Community helfen, die Technologie zu entwickeln, die sich mit der Speicherung und Verarbeitung großer Datenmengen sowohl vor Ort als auch in der Cloud befasst", sagte Michael Dolan, VP of Strategic Programs bei der Linux Foundation. "Die Linux Foundation unterstützt Open-Source-Communities dabei, ein offenes Governance-Modell zu nutzen, um einen weitgefächerten Beitrag der Industrie und die Konsensbildung zu ermöglichen, was den Stand der Technik für Datenspeicherung und -zuverlässigkeit verbessern wird."

Die Mitbegründer von Databricks sind die ursprünglichen Entwickler des Open-Source-Projekts Apache Spark, der Unified Analytics-Plattform, die sich zum Standard für die groß angelegte Datenverarbeitung entwickelt hat. Der CEO und Mitbegründer von Databricks, Ali Ghodsi, zeigt sich begeistert, diese Reise mit dem Delta Lake Projekt erneut zu unternehmen. "Unser Team hat weiterhin Open-Source-Projekte entwickelt und unterstützt, weil wir wissen, dass dies der schnellste und umfassendste Weg zur Innovation ist. Um die Datenherausforderungen von Unternehmen zu bewältigen, wollen wir sicherstellen, dass dieses Projekt Open Source in der wahrsten Form ist. Durch die Stärke der Linux Foundation Community und die Beiträge sind wir zuversichtlich, dass Delta Lake schnell zum Standard für die Datenspeicherung in Data Lakes werden wird."

Delta Lake wird über ein offenes Governance-Modell verfügen, das die Beteiligung und den technischen Fortschritt fördert und einen Rahmen für eine langfristige Betreuung durch ein Ökosystem bietet, das in den Erfolg von Delta Lake investiert hat. Obwohl Delta Lake ursprünglich für die Zusammenarbeit mit Apache Spark konzipiert war, hat es eine florierende Community entwickelt, die Unterstützung für andere Open-Source-Datensysteme bietet. (Linux Foundation: ra)

eingetragen: 17.10.19
Newsletterlauf: 28.11.19

Linux Foundation: Kontakt und Steckbrief

Der Informationsanbieter hat seinen Kontakt leider noch nicht freigeschaltet.


Meldungen: Unternehmen

  • Koalitionsziele für Rechenzentren einhalten

    Die im eco Verband gegründete Allianz zur Stärkung digitaler Infrastrukturen - eine Initiative aus Betreibern des Ökosystems digitaler Infrastrukturen - begrüßt die angekündigte Rechenzentren-Strategie für das Land Hessen und fordert einen ähnlichen Ansatz auch auf Bundesebene zur Stärkung des Rechenzentrumsstandort Deutschland. Eine solche bundesweite Strategie sollte auch die drängendsten Probleme der Betreiber adressieren: hohe Strompreise und Stromverfügbarkeit.

  • LevelBlue übernimmt Trustwave

    LevelBlue, Anbieterin von Cloud-basierten, KI-gestützten Managed Security Services (MSS), hat eine verbindliche Vereinbarung zur Übernahme von Trustwave unterzeichnet, einer globalen Anbieterin von Cybersicherheits- und Managed Detection and Response (MDR)-Dienstleistungen, die vom MC2 Security Fund (MC2), einem Private-Equity-Fonds, der von The Chertoff Group, einem international anerkannten Beratungsunternehmen für Sicherheit und Wachstum, gesponsert wird.

  • Cloud-Services und KI-gestützte Lösungen

    Xerox gibt bekannt, dass das Unternehmen im vierten Jahr in Folge von Quocirca, als führend in der Cloud Print Services Landscape 2025 eingestuft wurde. Quocirca ist ein britisches Marktforschungs- und Analyseunternehmen, das sich auf die Untersuchung von Technologiemärkten spezialisiert hat. In dem aktuellen jährlichen Bericht wurden die wichtigsten Markttrends für Cloud-Druckdienste und -Lösungen aufgezeigt und die Marktführer anhand der Tiefe ihrer Dienstleistungen und der Stärke ihrer Strategie identifiziert.

  • Exzellenz im Bereich Incident Response

    aDvens, Unternehmen für Cybersicherheit, ist vom Bundesamt für Sicherheit in der Informationstechnik (BSI) auf die Liste der qualifizierten APT-Response-Dienstleister aufgenommen worden. Diese vom BSI veröffentlichte Orientierungshilfe unterstützt Unternehmen, Behörden und Betreiber Kritischer Infrastruktur (KRITIS) externe Dienstleister zu finden, die bei der Abwehr oder Bewältigung eines erfolgreichen Cyberangriffs mit ihrer Expertise unterstützen können.

  • Cymbio arbeitet mit SAP zusammen

    Cymbio, Marktplatz- und Social-Commerce-Automatisierungsplattform für Marken wie New Balance, Balmain und Juicy Couture, gab bekannt, dass das Unternehmen dem SAP PartnerEdge-Programm beigetreten ist und seine Multi-Channel Expansion-Lösung für SAP Commerce Cloud im SAP Store eingeführt hat. Diese Partnerschaft markiert eine Erweiterung von Cymbios Angebot für globale und Unternehmensmarken, um ihren digitalen Vertrieb mit nahtloser Automatisierung zu skalieren.

  • Einheitliche Governance

    Databricks, ein Daten- und KI-Unternehmen, hat eine neue strategische Produktpartnerschaft mit Google Cloud bekannt gegeben. Die neuesten Gemini-Modelle werden als native Produkte innerhalb der "Databricks Data Intelligence Platform" verfügbar gemacht. Unternehmen können dadurch AI Agents mit den fortschrittlichen Funktionen von Google Gemini direkt auf ihren Unternehmensdaten sicher und mit einheitlicher Governance innerhalb ihrer Databricks-Umgebung erstellen, bereitstellen und skalieren.

  • Einblicke in KI-basierte Cloud-Lösungen

    Am 10. Juli 2025 lädt Devoteam gemeinsam mit Google Cloud zum Google Cloud Summit Süd nach München ein. Im Fokus der Veranstaltung: wie Unternehmen das volle Potenzial von Künstlicher Intelligenz entfesseln und ihre Innovationskraft mit Cloud-Technologien zukunftsfähig ausrichten.

  • Agilität, Leistung und langfristige Kompatibilität

    Das Technologieunternehmen HCLTech und AMD haben eine strategische Allianz angekündigt, um die digitale Transformation von Unternehmen weltweit durch fortschrittliche Lösungen in den Bereichen KI, Digital und Cloud zu beschleunigen.

  • Erfolgreiche Controlware Cloud Roadshow 2025

    Controlware begrüßte im Mai 2025 IT-Verantwortliche und Entscheider aus ganz Deutschland zur "Controlware Cloud Roadshow 2025". Als IT-Dienstleisterin und Managed Service Provider informierte gemeinsam mit renommierten Partnern über aktuelle Herausforderungen im Cloud-Umfeld und zeigte zeitgemäße Lösungsansätze für gängige Szenarien auf.

  • Moderne Cloud-Technologien bereitstellen

    Alibaba Cloud, Plattform der Alibaba Group, hat auf ihrem Global Innovation Summit 2025 in Paris eine Reihe verbesserter KI-Lösungen vorgestellt. Damit bekräftigt das Unternehmen sein Engagement für regionale Unternehmen durch die Erschließung neuer KI-Chancen.

Wir verwenden Cookies um unsere Website zu optimieren und Ihnen das bestmögliche Online-Erlebnis zu bieten. Mit dem Klick auf "Alle akzeptieren" erklären Sie sich damit einverstanden. Erweiterte Einstellungen