Artwork

תוכן מסופק על ידי Kostas Pardalis, Nitay Joffe. כל תוכן הפודקאסטים כולל פרקים, גרפיקה ותיאורי פודקאסטים מועלים ומסופקים ישירות על ידי Kostas Pardalis, Nitay Joffe או שותף פלטפורמת הפודקאסט שלהם. אם אתה מאמין שמישהו משתמש ביצירה שלך המוגנת בזכויות יוצרים ללא רשותך, אתה יכול לעקוב אחר התהליך המתואר כאן https://he.player.fm/legal.
Player FM - אפליקציית פודקאסט
התחל במצב לא מקוון עם האפליקציה Player FM !

From Data Mesh to Lake House: Revolutionizing Metadata with Lakekeeper

57:25
 
שתפו
 

Manage episode 472606309 series 3594857
תוכן מסופק על ידי Kostas Pardalis, Nitay Joffe. כל תוכן הפודקאסטים כולל פרקים, גרפיקה ותיאורי פודקאסטים מועלים ומסופקים ישירות על ידי Kostas Pardalis, Nitay Joffe או שותף פלטפורמת הפודקאסט שלהם. אם אתה מאמין שמישהו משתמש ביצירה שלך המוגנת בזכויות יוצרים ללא רשותך, אתה יכול לעקוב אחר התהליך המתואר כאן https://he.player.fm/legal.

Summary

In this episode, Viktor Kessler shares his journey and insights from his extensive experience in data management—from building risk management systems and data warehouses to working as a solutions architect at MongoDB and Dremio, and now co-founding a startup.

Initially exploring data mesh concepts, Viktor explains how real-world challenges—such as the disconnect between technical data models and business needs, inconsistent definitions across departments, and the difficulty in managing actionable metadata—led him and his co-founder to pivot toward building a lake house solution.

His startup is developing Lakekeeper, an open source REST catalog for Apache Iceberg, which aims to bridge the gap between decentralized data production and centralized metadata management.

The conversation also delves into the evolution of data catalogs, the necessity for self-service analytics, and how creating consumption-ready data products can transform data functions from cost centers into profit centers.

Finally, Viktor outlines ways for interested listeners to get involved with the Lakekeeper community through GitHub, upcoming meetups, and a dedicated Discord channel.

Chapters

00:00 Introduction to Viktor Kessler and His Journey
04:57 Transitioning from Data Mesh to Lake House
09:15 Understanding Data Mesh: Pain Points and Solutions
13:47 The Role of Metadata in Data Management
18:16 The Evolution of Catalogs and Metadata Management
28:14 Stabilizing the Consumption Pipeline
31:18 Centralizing Metadata for Decentralized Organizations
37:09 Bridging the Gap: Technical and Business Perspectives
43:17 Rethinking Data Products and Consumption
50:45 Finding Balance: Control and Flexibility in Data Management

  continue reading

22 פרקים

Artwork
iconשתפו
 
Manage episode 472606309 series 3594857
תוכן מסופק על ידי Kostas Pardalis, Nitay Joffe. כל תוכן הפודקאסטים כולל פרקים, גרפיקה ותיאורי פודקאסטים מועלים ומסופקים ישירות על ידי Kostas Pardalis, Nitay Joffe או שותף פלטפורמת הפודקאסט שלהם. אם אתה מאמין שמישהו משתמש ביצירה שלך המוגנת בזכויות יוצרים ללא רשותך, אתה יכול לעקוב אחר התהליך המתואר כאן https://he.player.fm/legal.

Summary

In this episode, Viktor Kessler shares his journey and insights from his extensive experience in data management—from building risk management systems and data warehouses to working as a solutions architect at MongoDB and Dremio, and now co-founding a startup.

Initially exploring data mesh concepts, Viktor explains how real-world challenges—such as the disconnect between technical data models and business needs, inconsistent definitions across departments, and the difficulty in managing actionable metadata—led him and his co-founder to pivot toward building a lake house solution.

His startup is developing Lakekeeper, an open source REST catalog for Apache Iceberg, which aims to bridge the gap between decentralized data production and centralized metadata management.

The conversation also delves into the evolution of data catalogs, the necessity for self-service analytics, and how creating consumption-ready data products can transform data functions from cost centers into profit centers.

Finally, Viktor outlines ways for interested listeners to get involved with the Lakekeeper community through GitHub, upcoming meetups, and a dedicated Discord channel.

Chapters

00:00 Introduction to Viktor Kessler and His Journey
04:57 Transitioning from Data Mesh to Lake House
09:15 Understanding Data Mesh: Pain Points and Solutions
13:47 The Role of Metadata in Data Management
18:16 The Evolution of Catalogs and Metadata Management
28:14 Stabilizing the Consumption Pipeline
31:18 Centralizing Metadata for Decentralized Organizations
37:09 Bridging the Gap: Technical and Business Perspectives
43:17 Rethinking Data Products and Consumption
50:45 Finding Balance: Control and Flexibility in Data Management

  continue reading

22 פרקים

כל הפרקים

×
 
Loading …

ברוכים הבאים אל Player FM!

Player FM סורק את האינטרנט עבור פודקאסטים באיכות גבוהה בשבילכם כדי שתהנו מהם כרגע. זה יישום הפודקאסט הטוב ביותר והוא עובד על אנדרואיד, iPhone ואינטרנט. הירשמו לסנכרון מנויים במכשירים שונים.

 

מדריך עזר מהיר

האזן לתוכנית הזו בזמן שאתה חוקר
הפעלה