Sie sind hier: Startseite » Markt » Unternehmen

Unterstützung von Amazon S3


Fivetran unterstützt die Automatisierung des Modern Data Lake auf Amazon S3
"Fivetran für Amazon S3" mit Apache Iceberg kombiniert großvolumige, kostengünstige Datenspeicherung mit einfachem Zugriff und umfassender Compliance



Fivetran, Anbieterin für automatisiertes Data Movement, kündigt den Support für Amazon Simple Storage Service (Amazon S3) mit Apache Iceberg für Data Lake Formate an. Amazon S3 ist ein Objektspeicherdienst von Amazon Web Services (AWS), der für seine Skalierbarkeit, Datenverfügbarkeit, Sicherheit und Performance bekannt ist. Apache Iceberg ist ein weithin unterstütztes Open-Source-Datenformat, das AKID-Transaktionen (AKID-Eigenschaften bei Transaktionen in Datenbankmanagement-Systemen: Atomarität, Konsistenz, Isolation und Dauerhaftigkeit) für Data Lakes bietet. Fivetran ist die Plattform für automatisiertes Data Movement, die persönlich identifizierbare Informationen (PII) anonymisiert, während sie Daten bereinigt, normalisiert und automatisiert in den Data Lake lädt.

Ein Data Lake ist eine beliebte Destination für alle, die sehr große Datensätze analysieren oder umfangreiche Data-Science-Projekte durchführen müssen, um ihr Business voranzubringen. So werden auf Amazon S3 Hunderttausende von Data Lakes betrieben. Von den vielen Teams in Unternehmen, die mit einem Data Lake arbeiten, nennt die Mehrheit folgende Vorteile: erhöhte Agilität, optimierte Entwicklung von Produkten und Dienstleistungen sowie einen verbesserten Kundenservice und eine höhere Kundenbindung.

"Die Unterstützung von Amazon S3 als Destination durch Fivetran ist für unsere Plattform Distilled und für alle, die externe Daten- und Analyseprodukte entwickeln, von enormer Bedeutung", so Aaron Peabody, Mitbegründer und CEO von Untitled Firm. "Durch die Unterstützung von Fivetran für S3 als Destination, können unsere Kunden das volle Potenzial des AWS-Datenökosystems nutzen. Wir sind begeistert, dass Fivetran in dieses Vorhaben investiert hat. Denn es ist ein wichtiger Katalysator für die Produkt-Roadmap bei Untitled."

"Jetzt extrahieren, bereinigen, deduplizieren und präparieren wir automatisiert große Mengen semi-strukturierter Daten für die Analyse. Wir betreiben Data Lakes genau so zuverlässig und sicher, wie heute unsere Kunden ihre Daten in ihre Cloud-Warehouses bringen", erklärt Fraser Harris, Vice President of Product bei Fivetran. "Fivetran und AWS sind beide der Überzeugung, dass Data Lakes mit Daten, die keine Struktur, Governance und Präzision haben, die Komplexität unnötig erhöhen. Daher können Unternehmen nicht den vollen Wert ihrer Daten, die sie dort speichern, ausschöpfen. Die Mission von Fivetran ist es, den Zugang zu Daten so einfach und zuverlässig wie Strom zu machen. Und der Support für S3 als Destination bringt unser Versprechen in die Welt der Data Lakes."

"Wir freuen uns über die zusätzlichen Zugangsmöglichkeiten für Amazon S3 mit Iceberg ", so Greg Khairallah, Director of Analytics bei AWS. "Auf diese Weise vereinfachen wir unseren Kunden die Dateneingabe und bieten ihnen gleichzeitig die Skalierbarkeit eines Data Lake und die zuverlässige Datentransformation eines Data Warehouse."

Organisationen setzen immer mehr auf Data Lakes, um Analysen und Erkenntnisse aus ihren Daten zu ziehen. Und daher steigen die Ansprüche fortschrittlicher Marketing-Intelligence-Teams entsprechend. Lösungen wie Amazon S3 und automatisierte Pipelines werden diesen gerecht. Tinuiti, eines der größten unabhängigen Performance-Marketing-Unternehmen, verarbeitet täglich große Datenmengen und setzt auf einen Data Lake (insbesondere Amazon S3), um das Markenpotenzial seiner Kunden zu erfassen.

"Der Data Lake ist eine einfache, kostengünstige, sichere und robuste Möglichkeit, alle Daten unserer Kunden zu speichern", so Lakshmi Ramesh, Vice President, Data Services bei Tinuiti. "Die größte Herausforderung besteht in der Optimierung der Leistung und Zugänglichkeit. Aber mit der Unterstützung von Fivetran für Amazon S3 mit Iceberg wird unsere Fivetran-Pipeline weiter optimiert. Da der Data Lake unsere Single Source of Truth ist, ist es ganz entscheidend, dass alle Daten, die aus verschiedenen Quellen eingespeist werden, im Data Lake zugänglich sind."

Für moderne Unternehmen ist es unerlässlich, den Aufwand für das Management von Data Lakes durch Pipeline-Automatisierung und Governance zu reduzieren. Dadurch entfallen alle manuellen Schritte, die vor einer Abfrage erforderlich sind, wie etwa die Datenaufnahme und -bereinigung sowie die Vorbereitung für die Verwendung oder das Hashing und Sperren von sensiblen Daten.

"Die Unterstützung von Fivetran für Amazon S3 und die Standardisierung des Iceberg-Formats macht es für Unternehmen einfacher denn je, ihre Daten in ein Lakehouse zu bringen", sagt Tomer Shiran, Mitbegründer und CPO von Dremio. "Mit Fivetran, AWS und Dremio können Unternehmen eine offene Daten-Lakehouse-Architektur aufbauen, mit der Nutzer schnell auf Daten zugreifen und diese abfragen können, um wichtige datengestützte Erkenntnisse über ihr Business zu erhalten." (Fivetran: ra)

eingetragen: 19.04.23
Newsletterlauf: 14.06.23


Meldungen: Unternehmen

  • Aufbau souveräner Cloud-Umgebungen

    enclaive präsentierte ihre Lösungen für sichere Cloud-Umgebungen und KI-Nutzung in Nürnberg auf der it-sa. Highlight des Auftritts: Post-Quanten-sichere Enklaven und Key-Management-Lösungen. Die Messe stand auch in diesem Jahr wieder im Zeichen der Cloud und Künstlicher Intelligenz.

  • Digitale Souveränität in der Cloud

    Bitdefender hat ihre strategische Partnerschaft mit secunet bekanntgegeben, einem Unternehmen, das auf digitale Souveränität und den Schutz hochkritischer Umgebungen, etwa von Behörden, spezialisiert ist. In Deutschland kann Bitdefender ab sofort Bitdefender GravityZone, ihre umfassende Plattform für Cybersicherheit, Risikomanagement und Compliance, in der souveränen OpenStack Cloud von SysEleven, einem Tochterunternehmen von secunet, hosten. Kunden- und Konfigurationsdaten, Sicherheitsereignisse und Telemetriedaten werden so ausschließlich innerhalb der Europäischen Union verarbeitet.

  • Automatisierung und KI

    Tata Consultancy Services (TCS) intensiviert ihre strategische Partnerschaft mit Tryg, einem skandinavischen Sachversicherer, der in Dänemark, Schweden und Norwegen tätig ist. Im Rahmen der siebenjährigen Vereinbarung im Wert von 550 Millionen Euro unterstützt TCS Tryg dabei, die Betriebsabläufe in ihren drei Kernmärkten zu vereinfachen, zu standardisieren und die technologische Transformation voranzutreiben, um das Unternehmenswachstum zu beschleunigen.

  • Mehr als nur ERP-Kernfunktionen

    Haufe X360 wächst mit den Anforderungen ihrer Nutzer und entwickelt sich stetig zur zentralen Business-Management-Plattform für den Mittelstand. Durch die nahtlose Anbindung spezialisierter Best-of-Breed-Partnerlösungen bietet Haufe X360 immer mehr Funktionen, die Unternehmen direkt aus Haufe X360 heraus nutzen können - ob für HR, Logistik, Buchhaltung oder Zollabwicklung. So lassen sich noch mehr Prozesse einfach steuern - in einer einzigen, integrierten Lösung.

  • Google Cloud Day 2025

    Unter dem Motto "The Future of Business with Agentic AI" laden Devoteam und Google Cloud Entscheider und IT-Experten am 22. Oktober zum Google Cloud Day 2025 (GCD 2025) in das Devoteam Büro in Frankfurt ein. Die Veranstaltung bietet Keynotes, praxisorientierte Breakout-Sessions und Networking-Möglichkeiten - und zeigt, wie intelligente Agenten Geschäftsprozesse revolutionieren und bis zu 90 Prozent effizienter machen können.

  • Neue Lösungen für Aufbau von KI-Agenten

    Neo4j gab die Investition von 100 Millionen US-Dollar bekannt. Damit will das Unternehmen seine Position als Standard-Knowledge-Layer für agentenbasierte Systeme (Agentic Systems) und als zentrale Infrastruktur für KI (GenAI, Generative AI) weiter ausbauen. Die Investition fließt in Produktinnovationen - darunter zwei neue Angebote für KI-Agenten - sowie in den Start eines der bislang größten Startup-Programme für KI-native Unternehmen. Innerhalb der nächsten zwölf Monate sollen damit weltweit 1.000 Startups unterstützt werden.

  • Cyberresilienz durch "Commvault Cloud"

    Commvault und BeyondTrust, Anbieterin von Identitätssicherheit, haben die Integration der Cyberresilienz-Plattform "Commvault Cloud" und der Password-Safe-Privileged-Access-Management (PAM)-Lösung auf der BeyondTrust Pathfinder-Plattform bekanntgegeben. Diese Zusammenarbeit will Kunden unterstützen, Risiken zu minimieren, den Status ihrer IT-Sicherheit zu verbessern und die Effizienz der Datenwiederherstellung zu steigern.

  • Cyberresilienz und Data Security

    Die DMP DataManagement Professionals GmbH hat bekannt gegeben, dass das Unternehmen unter dem neuen Namen Pink Elephant GmbH firmieren wird. Die Namensänderung ist ein weiterer Schritt in der strategischen Ausrichtung des Unternehmens und unterstreicht die Zugehörigkeit zur Muttergesellschaft Pink Elephant B.V. mit Hauptsitz in Naarden, Niederlande. Die Pink Elephant B.V. wiederum ist eine 100prozentige Tochtergesellschaft der The Digital Neighborhood B.V. (TDN).

  • Bereich Cloud Financial Management

    Flexera, Anbieterin für Software-Lizenzmanagement und Technology Intelligence, zählt zum zweiten Mal in Folge zu den "Leadern" im Gartner Magic Quadrant 2025 für Cloud Financial Management Tools. Der aktuelle Bericht hebt nach Flexera die kontinuierliche Stärke des Unternehmens in der Umsetzung sowie die Vollständigkeit der Vision im Bereich Cloud Financial Management (auch bekannt als FinOps) hervor.

  • Cloud-Edge-Konzepte und Datenräume

    Der eco - Verband der Internetwirtschaft e. V. und die IndustryFusion Foundation haben eine weitreichende Kooperation vereinbart, um den Ausbau digitaler Infrastrukturen und souveräner Datenräume für industrielle Anwendungen in Europa voranzutreiben. Im Mittelpunkt steht die gemeinsame Weiterentwicklung von Open-Source-Datenräumen, Edge-/Cloud-Infrastrukturen sowie interoperablen Standards für Industrie 4.0.

Wir verwenden Cookies um unsere Website zu optimieren und Ihnen das bestmögliche Online-Erlebnis zu bieten. Mit dem Klick auf "Alle akzeptieren" erklären Sie sich damit einverstanden. Erweiterte Einstellungen