你流ETL在規模與Apache火花的結構化流

在火花峰會6月在舊金山,我們宣布,Apache火花的結構化流被標記為生產就緒和共享的基準來演示其性能相比其他流引擎。

結構化流是一種新穎的方式來處理流。這不僅新方法使它容易構建端到端的流媒體應用程序,但它也為容錯處理所有底層的複雜性。你作為一名開發人員不需要擔心。

在數據+人工智能峰會,我將兩個結構化流的會談涵蓋許多方麵。第一講包括概念、api、集成與外部源和彙,潛在的增量火花SQL執行引擎,和容錯語義,而第二個重點是有狀態的流處理使用mapGroupsWithStateapi。

1. 容易,可伸縮,容錯流處理結構化流在Apache火花
2. 深入探究狀態流處理結構化流

你為什麼要參加這些會議嗎?如果你是一個工程師或數據科學家想要提高你的ETL流,建立低延遲和快速的數據預測物聯網或欺詐監測應用程序,並創建數據流管道攝入和實時流媒體分析,然後參加我的會議。

看看你都柏林!