马克西姆Gekk

bob下载地址开源的团队,砖

    我是一个开放源码的软件工程师团队在砖。bob下载地址有限公司自2017年以来,我为Apache火花,特别是,JSON或CSV数据源,日期时间api、数据源v2命令等。在砖,我一直工作在几个部门支持L1 / L2工程。砖之前,我开发的应用程序的Apache火花在华为,Fyber GmbH是一家和思科系统。

    过去的会议

    2021年峰会 全面看待间隔在Apache 3.2火花

    2021年5月28日上午10:30 PT吗

    概述的间隔在Apache火花在3.2版本之前,和未来的变化在将来的版本中。符合ANSI SQL标准。我们将讨论现有的区间api的问题和如何解决新问题类型:year-month间隔和白天间隔。我将展示如何使用SQL和PySpark火花的间隔API,以及如何避免潜在的问题。我将演示的时间间隔从外部类型,通过火花的内置数据源和保存/加载。

    在这个会话表:
    马克西姆Gekk,开源团bob下载地址队,砖

    (daisna21-sessions-od)

    峰会的欧洲2020 全面看待日期-时间Apache火花3.0的api

    2020年11月17日下午内PT

    是谈论日期-时间处理在火花3.0中,火花2.4以来的API和实现。特别是,我将涵盖以下主题:1。定义和内部表示的日期/时间戳火花SQL。火花3.0日期-时间API的比较与先前的版本和其他DBMS。2。日期/时间戳函数火花SQL。行为的细微差别和实施的细节。用例和角落的日期-时间API。3所示。从混合迁移日历(朱利安和公历日历)预期的公历3.0在火花。 4. Parsing of date/timestamp strings, saving and loading date/time data via Spark's datasources. 5. Support of Java 8 time API in Spark 3.0.

    演讲者:箴言Gekk