公司博客上

你流ETL在规模与Apache火花的结构化流

通过如来佛Das

2017年9月1日 公司博客上

分享这篇文章

火花峰会6月在旧金山,我们宣布,Apache火花的结构化流被标记为生产就绪和共享的基准来演示其性能相比其他流引擎。

结构化流是一种新颖的方式来处理流。这不仅新方法使它容易构建端到端的流媒体应用程序,但它也为容错处理所有底层的复杂性。你作为一名开发人员不需要担心。

数据+人工智能峰会,我将两个结构化流的会谈涵盖许多方面。第一讲包括概念、api、集成与外部源和汇,潜在的增量火花SQL执行引擎,和容错语义,而第二个重点是有状态的流处理使用mapGroupsWithStateapi。

  1. 容易,可伸缩,容错流处理结构化流在Apache火花
  2. 深入探究状态流处理结构化流

你为什么要参加这些会议吗?如果你是一个工程师或数据科学家想要提高你的ETL流,建立低延迟和快速的数据预测物联网或欺诈监测应用程序,并创建数据流管道摄入和实时流媒体分析,然后参加我的会议。

看看你都柏林!

免费试着砖
看到所有公司博客上的帖子