碧玉Groot

高级数据工程师,哪些

    碧玉是一个高级的数据工程师Eventbrite与背景在国际业务。3年的经验在生产中使用火花,他利用在不同的用例。现在关注大数据环境下的操作方面以及教育其他工程师如何使用这些工具。

    过去的会议

    峰会的欧洲2019 实时数据仓库与Apache火花和三角洲湖附近

    2019年10月15日凌晨5点PT

    及时的数据在数据仓库是一个挑战我们中的许多人的脸,常常因为没有简单的解决方案。
    使用批处理和流数据管道可以利用三角洲湖格式提供一个企业数据仓库以接近实时的频率。三角洲湖简化了ETL工作负载在仓储环境中通过支持ACID事务。结合结构化流,可以实现低延迟数据仓库。在这次演讲中,我们将讨论如何使用三角洲湖提高摄入的延迟和存储你的数据仓库表。我们还将讨论如何使用火花流构建聚合和表驱动你的数据仓库。