StreamSets Transformer: Slowly Changing Dimensions

DataOps for Modern Data Integration

Static data such as street addresses and locations rarely change. But when they do, it is critical to maintain a history of that change.

This webinar highlighted common design patterns for handling Slowly Changing Dimension (SCD) Type 2, and illustrates how easy it is to implement those patterns using SCD processors in StreamSets Transformer.

Watch this demo of processors and target applications for:

  • Managing customer records with updates to addresses
  • Incremental updates for JDBC streaming data
  • Incremental updates for Databricks Delta Lake (DBFS)

     Demos with Dash


    Dash Desai, Technology Evangelist






   Sean Anderson, Product Marketing

ALT TEXT


Slowly Changing Dimensions & StreamSets Transformer

ALT TEXT

 

Lorem ipsum dolor sit amet consectetur adipisicing elit

Seventy-Thirty

Lorem ipsum dolor sit amet consectetur adipisicing elit. Voluptate corporis incidunt earum laborum veniam, est, aliquid assumenda voluptas ea ipsum repellendus sunt. Esse, fuga molestias? Cum consequatur maiores recusandae illo? Voluptate corporis incidunt earum laborum veniam, est, aliquid assumenda voluptas ea ipsum repellendus sunt. Esse, fuga molestias? Cum consequatur maiores recusandae illo?

ALT TEXT
ALT TEXT

Lorem ipsum dolor sit amet consectetur adipisicing elit.

Lorem ipsum dolor sit amet consectetur adipisicing elit. Eveniet itaque nesciunt sit quos nostrum maiores culpa autem cupiditate. Dolore veniam repellat nemo et quod tempora dicta sunt illum alias sed!

ALT TEXT

Lorem ipsum dolor sit amet consectetur adipisicing elit.

Lorem ipsum dolor sit amet consectetur adipisicing elit. Eveniet itaque nesciunt sit quos nostrum maiores culpa autem cupiditate. Dolore veniam repellat nemo et quod tempora dicta sunt illum alias sed!

ALT TEXT

Lorem ipsum dolor sit amet consectetur adipisicing elit.

Lorem ipsum dolor sit amet consectetur adipisicing elit. Eveniet itaque nesciunt sit quos nostrum maiores culpa autem cupiditate. Dolore veniam repellat nemo et quod tempora dicta sunt illum alias sed!

Attend our workshop hosted by our customer, Thematic Groupe [WYND]


WYND’s DataOps Journey with StreamSets

Speaker: CDO from Thematic Groupe [WYND] 

When: March 9th at 10h30

Where: TBD

[Add to calendar] 


Attend StreamSets’ CEO’s keynote at the main stage


DataOps: A Paradigm Shift for Modern Data Integration

Speaker: Girish Pancha, CEO and Co-Founder, StreamSets 

When: TBD 

Where: Business Track Stage

[Add to calendar]  



[Meet with an Expert]

3UP Text Only Headline

Lorem ipsum dolor sit amet consectetur adipisicing elit. Eveniet itaque nesciunt sit quos nostrum maiores culpa autem cupiditate. Dolore veniam repellat nemo et quod tempora dicta sunt illum alias sed!

Lorem ipsum dolor sit amet consectetur adipisicing elit. Eveniet itaque nesciunt sit quos nostrum maiores culpa autem cupiditate. Dolore veniam repellat nemo et quod tempora dicta sunt illum alias sed!

Lorem ipsum dolor sit amet consectetur adipisicing elit. Eveniet itaque nesciunt sit quos nostrum maiores culpa autem cupiditate. Dolore veniam repellat nemo et quod tempora dicta sunt illum alias sed!

Lorem ipsum dolor sit amet consectetur adipisicing elit.

  • Lorem ipsum dolor sit amet consectetur adipisicing elit. Id iste delectus a. Nobis quo sit, debitis, delectus a praesentium accusantium repellendus at, itaque vitae illo unde maiores nemo. Laudantium, qui!
  • Lorem ipsum dolor sit amet consectetur adipisicing elit. Id iste delectus a. Nobis quo sit, debitis, delectus a praesentium accusantium repellendus at, itaque vitae illo unde maiores nemo. Laudantium, qui!
  • Lorem ipsum dolor sit amet consectetur adipisicing elit. Id iste delectus a. Nobis quo sit, debitis, delectus a praesentium accusantium repellendus at, itaque vitae illo unde maiores nemo. Laudantium, qui!
  • Lorem ipsum dolor sit amet consectetur adipisicing elit. Id iste delectus a. Nobis quo sit, debitis, delectus a praesentium accusantium repellendus at, itaque vitae illo unde maiores nemo. Laudantium, qui!
  • Lorem ipsum dolor sit amet consectetur adipisicing elit. Id iste delectus a. Nobis quo sit, debitis, delectus a praesentium accusantium repellendus at, itaque vitae illo unde maiores nemo. Laudantium, qui!
Other Helpful Resources