[Webinar] Beherrsche die Grundlagen von Apache Kafka® mit Confluent | Jetzt registrieren
Durch den Einsatz von Apache Kafka und Delta Lake lösen Confluent und Databricks das Problem isolierter Datensilos in Unternehmen.
MÜNCHEN — le 13 février 2025, 2025 — Confluent, Inc. (NASDAQ:CFLT), der Pionier im Bereich Daten-Streaming, und Databricks, das Daten- und KI-Unternehmen, kündigen eine umfassende Erweiterung ihrer Partnerschaft an. Durch die Kombination der vollständigen Daten-Streaming-Plattform von Confluent mit der Data-Intelligence-Plattform von Databricks können Unternehmen Echtzeitdaten für KI-gestützte Entscheidungen nutzen. Die neuen Integrationen zwischen Confluents Tableflow und Databricks Unity Catalog werden eine nahtlose Datensteuerung- und Kontrolle über operative und analytische Systeme hinweg sicherstellen.
Die Herausforderung rund um KI-Daten lösen Immer mehr Unternehmen entwickeln KI-Anwendungen, die zuverlässige Echtzeitdaten benötigen, damit sie fundierte Entscheidungen treffen und das Kundenerlebnis optimieren können. Dennoch glauben nur 22 Prozent der Unternehmen, dass ihre aktuelle IT-Infrastruktur diesen neuen KI-Anwendungen gewachsen ist. Eine der größten Herausforderungen ist die Kluft zwischen Betriebssystemen, die Daten erzeugen, und Analysesystemen, die sie auswerten. Da diese Systeme in getrennten Silos existieren, arbeiten daran jeweils verschiedene Teams mit unterschiedlichen Tools und Prozessen. Dadurch können Teams die Echtzeitdaten nicht sinnvoll mit anderen Systemen verknüpfen, was KI-Innovationen für fortgeschrittene Anwendungsfälle praktisch unmöglich macht.
„Wenn Unternehmen den Nutzen ihrer KI-Investitionen maximieren wollen, müssen sie ihre Daten, KI, Analysen und Governance zentral bündeln“, so Ali Ghodsi, Mitbegründer und CEO von Databricks. „Da wir immer mehr Unternehmen bei der Entwicklung von Data Intelligence unterstützen, rücken vertrauenswürdige Unternehmensdaten zunehmend in den Mittelpunkt. Wir freuen uns, dass Confluent unsere Lösungen Unity Catalog und Delta Lake für Open Governance und Speicherung wählt. Damit bieten wir den Kunden gemeinsam einen langfristigen Mehrwert.“
„Echtzeitdaten sind der Treibstoff von KI“, sagte Jay Kreps, Mitbegründer und CEO von Confluent. „Doch allzu oft verhindern isolierte Systeme, dass Unternehmen die benötigten Daten im benötigten Format zum benötigten Zeitpunkt erhalten. Gemeinsam mit Databricks sorgen wir dafür, dass Unternehmen das Potenzial von Echtzeitdaten voll ausschöpfen können, um anspruchsvolle KI-gesteuerte Anwendungen für ihre wichtigsten Anwendungsfälle zu entwickeln.“
Echtzeitdaten, bereit für KI Um diese Kluft zu überbrücken, kündigen Confluent und Databricks neue Integrationen an, die den Datenaustausch in Echtzeit sicherstellen und eine erfolgreiche Zusammenarbeit im gesamten Unternehmen ermöglichen. Die bidirektionale Integration von Confluents Tableflow mit Delta Lake und dem Unity Catalog von Databricks – einer einheitlichen und offenen Governance-Lösung für Daten und KI – stellt konsistente Echtzeitdaten über operationale und analytische Systeme hinweg bereit, die leicht auffindbar, sicher und vertrauenswürdig sind.
Delta Lake ist eine von Databricks entwickelte formatunabhängige Speicherebene, die ursprünglich für Streaming-Anwendungsfälle mit schnellen Schreibvorgängen konzipiert wurde. Inzwischen ist es das am weitesten verbreitete Lakehouse-Format: Mit einer täglichen Datenverarbeitung von über 10 Exabyte hat es sich in großem Maßstab bewährt. Durch die Kombination von Tableflow und Delta Lake sind Betriebsdaten nun sofort im umfangreichen Delta-Lake-Ökosystem verfügbar. Kunden von Confluent und Databricks können beliebige Engines oder KI-Tools wie Apache Spark, Trino, Polars, DuckDB und Daft auf ihre Daten in Unity Catalog anwenden.
Benutzerdefinierte Integrationen zwischen Tableflow und dem Unity Catalog von Databricks sorgen dafür, dass Metadaten – ein entscheidender Faktor für KI-Anwendungen – automatisch zu den ausgetauschten Daten ergänzt werden. Dadurch sind operationale Daten für Data-Science- und Analytics-Teams in Databricks genauso leicht zugänglich und nutzbar wie analytische Daten für Anwendungsentickler und Streaming Engineers in Confluent. Die Stream-Governance-Suite von Confluent wird außerdem vorgelagerte Governance und Metadaten bereitstellen. Dies verbessert Governance, macht End-to-End-Nachverfolgbarkeit von Streams möglich und optimiert das automatisierte Monitoring der Datenqualität in Unity Catalog.
„Die räumliche Nähe zur Quelle ist nicht nur im Energiesektor, sondern auch im Datenbereich ein entscheidender Faktor“, sagte Dr. Dora Simroth, Head of Data and AI Engineering bei E.ON Digital Technology. „Confluent und Databricks sind bereits zentrale Technologien in unserem Daten- und KI-Stack. Dank dieser Integrationen können unsere Fachkräfte sowohl auf betrieblicher als auch auf analytischer Ebene mit einer einzigen, klar definierten und aktuellen Datenquelle arbeiten. Mit der Partnerschaft zwischen Confluent und Databricks können wir daten- und modellbasierte digitale Lösungen schneller entwickeln.“
Dank dieser neuen Funktionen werden operationale Daten von Confluent nahtlos in Databricks integriert, während die Daten aus Databricks unternehmensweit für alle Verarbeitungsprozesse frei zugänglich sind. Die Topics, die von KI-Anwendungen genutzt werden, und die Tabellen, mit denen Datenanalysten arbeiten, bieten nun eine einheitliche Sicht auf dieselben Echtzeitdaten. So lassen sich unternehmensweit schneller fundierte, KI-gestützte Entscheidungen treffen. Diese nahtlose Integration von Betriebsanwendungen, Analysen und Governance ist entscheidend für KI-Innovationen in großem Maßstab.
Weitere Informationen über die erweiterte Partnerschaft bietet der folgende Blogbeitrag von Ali Ghodsi, CEO von Databricks, und Jay Kreps, CEO von Confluent: confluent.io/blog/confluent-and-databricks/
Über Confluent Confluent ist die Daten-Streaming-Plattform, die eine grundlegend neue Kategorie von Dateninfrastrukturen entwickelt, die Daten in Bewegung setzen. Das Cloud-native Angebot von Confluent ist die grundlegende Plattform für Data in Motion, die als intelligentes Bindegewebe dafür sorgt, dass Echtzeitdaten aus verschiedenen Quellen kontinuierlich durch das Unternehmen fließen. Mit Confluent können Unternehmen den neuen geschäftlichen Anforderungen gerecht werden, ein reichhaltiges, digitales Kundenerlebnis im Front-End-Bereich zu bieten und auf anspruchsvolle, softwaregesteuerte Back-End-Abläufe in Echtzeit umzustellen. Um mehr zu erfahren, besuchen Sie gerne www.confluent.io/de-de/.
Über Databricks Databricks ist das Unternehmen für Daten und AI. Mehr als 10.000 Unternehmen weltweit - darunter Comcast, Condé Nast, Grammarly und mehr als 50 % der Fortune 500 - vertrauen auf die Databricks Data Intelligence Platform, um ihre Daten, Analysen und AI zu vereinen. Databricks hat seinen Hauptsitz in San Francisco und verfügt über Niederlassungen auf der ganzen Welt. Das Unternehmen wurde von den ursprünglichen Entwicklern von Lakehouse, Apache Spark™, Delta Lake und MLflow gegründet.