Artwork

Innehåll tillhandahållet av Travis Lawrence. Allt poddinnehåll inklusive avsnitt, grafik och podcastbeskrivningar laddas upp och tillhandahålls direkt av Travis Lawrence eller deras podcastplattformspartner. Om du tror att någon använder ditt upphovsrättsskyddade verk utan din tillåtelse kan du följa processen som beskrivs här https://sv.player.fm/legal.
Player FM - Podcast-app
Gå offline med appen Player FM !

Why You Should Be Using (CDC) Change Data Capture for Ingestion with Datacoral

40:47
 
Dela
 

Manage episode 292793592 series 2881014
Innehåll tillhandahållet av Travis Lawrence. Allt poddinnehåll inklusive avsnitt, grafik och podcastbeskrivningar laddas upp och tillhandahålls direkt av Travis Lawrence eller deras podcastplattformspartner. Om du tror att någon använder ditt upphovsrättsskyddade verk utan din tillåtelse kan du följa processen som beskrivs här https://sv.player.fm/legal.

In this episode, we speak with Raghu Murthy. He is the founder of Datacoral, which provides serverless architectures that support data pipelines and orchestration to facilitate ELT into your Data Warehouse. Prior to founding Datacoral he was at Yahoo, Facebook and was part of the initial team that developed Hive. In this episode we will explore the best patterns for ingesting operational data into your data warehouse, creating metadata first architectures and the role Datacoral serves.

Top 3 Value Bombs:

  1. If you're migrating relational data that supports CDC, you should be using CDC to migrate it for the majority of use cases.
  2. ELT/ETL pipelines should be orchestrated by a metadata first style architecture.
  3. Consumers of the DW, should be notified if data is incomplete.
  continue reading

43 episoder

Artwork
iconDela
 
Manage episode 292793592 series 2881014
Innehåll tillhandahållet av Travis Lawrence. Allt poddinnehåll inklusive avsnitt, grafik och podcastbeskrivningar laddas upp och tillhandahålls direkt av Travis Lawrence eller deras podcastplattformspartner. Om du tror att någon använder ditt upphovsrättsskyddade verk utan din tillåtelse kan du följa processen som beskrivs här https://sv.player.fm/legal.

In this episode, we speak with Raghu Murthy. He is the founder of Datacoral, which provides serverless architectures that support data pipelines and orchestration to facilitate ELT into your Data Warehouse. Prior to founding Datacoral he was at Yahoo, Facebook and was part of the initial team that developed Hive. In this episode we will explore the best patterns for ingesting operational data into your data warehouse, creating metadata first architectures and the role Datacoral serves.

Top 3 Value Bombs:

  1. If you're migrating relational data that supports CDC, you should be using CDC to migrate it for the majority of use cases.
  2. ELT/ETL pipelines should be orchestrated by a metadata first style architecture.
  3. Consumers of the DW, should be notified if data is incomplete.
  continue reading

43 episoder

Alla avsnitt

×
 
Loading …

Välkommen till Player FM

Player FM scannar webben för högkvalitativa podcasts för dig att njuta av nu direkt. Den är den bästa podcast-appen och den fungerar med Android, Iphone och webben. Bli medlem för att synka prenumerationer mellan enheter.

 

Snabbguide