Schwerpunktthema

Data Mesh

Fachartikel, Podcasts, Vorträge und mehr zum Thema Data Mesh.

Data Contracts

API Spezifikationen, aber für Datensätze

Entwicklung eines Datenprodukts mit Databricks

Im modernen Data Engineering geht es v.a. um die Entwicklung modularer Datenprodukte. Dieser Artikel beschreibt die Vorteile von Modularität gegenüber monolithischen Datenpipelines und erklärt Schritt für Schritt, wie sich Datenprodukte mithilfe von Databricks entwickeln lassen – von der Definition eines Data Contracts über die Erstellung und Implementierung von Databricks Asset Bundles bis hin zur Einrichtung einer CI/CD-Pipeline und der Veröffentlichung von Metadaten.

Podcast

Data Mesh

Was ist das schon wieder?

Artikel

Was ist ein Datenprodukt?

Spätestens seit Data Mesh ist der Begriff Datenprodukt in der Datenwelt allgegenwärtig, und doch oft nicht genau definiert. Ein Datenprodukt ist nach unserem Verständnis eine logische Einheit, die alle Komponenten zur Verarbeitung von Domänendaten und zur Bereitstellung von Daten über Output-Ports für Analysezwecke enthält.

Blog-Post

Was ist ein Data Contract?

Ein Data Contract definiert die Struktur, das Format, die Semantik, die Qualität und die Nutzungsbedingungen für den Datenaustausch zwischen einem Datenanbieter und seinen Konsumenten. Es ist damit ein zentrales Werkzeug, damit sich Teams über Daten-Schnittstellen verständigen können und somit Stabilität, Datenqualität und Nachvollziehbarkeit in der Datenarchitektur gewährleisten.

Artikel

Creating data products with Terraform on AWS

Blog-Post

Ist BI-Software für Entwicklungsteams sinnvoll?

Zeit ist ein kostbares Gut und mit der Analyse und Aufbereitung von Daten lässt sie sich gut verbringen. Darum kann es sich lohnen, sich einmal mit BI-Software zu beschäftigen.

Blog-Post

Warum dein Team Data Products braucht

Hast du schon einmal das Gefühl gehabt du oder dein Team verbringt zu viel Zeit mit einzelnen Datenrecherchen oder ihr trefft viele Entscheidungen aus dem Bauch heraus? Dann wird es vielleicht Zeit sich als Team einmal mit Data Products zu beschäftigen.

Artikel

Processing medical study data with Data Mesh technologies

Revisiting the tech stack of a self-serve data platform

Artikel

Data Mesh: Entwicklungsteams heben Datenschätze

Der dezentrale Datenarchitekturansatz soll Entwicklerinnen und Entwickler in die Lage versetzen, selbstständig domänenübergreifende Datenanalysen durchzuführen.

Blog-Post

Data Mesh to Go: How to Get the Data Product

You know what a data mesh is? You understand its basic principles? But you don’t know how on earth to get the data product? Then I will show you how to extract your data product from your Domain-driven Design (DDD) artifacts.