安倍龚

super导电公司首席执行官兼联合创始人

    Abe Gong是Great Expectations开源库的核心贡献者,也是superconductivity的bob下载地址首席执行官和联合创始人。在加入super导体之前,Abe是Aspire Health的首席数据官,Jawbone数据科学团队的创始成员,以及Massive Health的首席数据科学家。十多年来,安倍一直领导团队使用数据和技术解决医疗保健、消费者健康和公共政策方面的问题。安倍在密歇根大学公共政策、政治学和复杂系统专业获得博士学位。他经常就数据、医疗保健和数据伦理发表演讲和写作。

    过去的会议

    2020年峰会 用于保护数据管道免受未记录假设的自动化测试

    2020年6月25日下午05:00 PT

    关于数据管道中未经测试的、未记录的数据假设会产生风险、浪费时间并侵蚀对数据产品的信任。自动化测试已经成为现代软件开发中最大的生产力推动者之一,对于管理复杂的代码库至关重要。数据科学和工程在很大程度上错过了自动化测试。本次演讲将介绍一个名为Great Expectations的开源python框架,用于测试数据管道和产品。Great Expectations是一个python框架,用于测试数据管道和产品。像传统python单元测试中的断言一样,期望提供了一种灵活的声明性语言来描述预期的行为。与传统的单元测试不同,Great Expectations将期望应用于数据而不是代码。我们坚信,管道债务累积造成的大部分痛苦是可以避免的。

    我们建立了远大前程,让它变得非常非常简单:

    1. 尽早设置测试框架
    2. 抓住那些刚学到的东西
    3. 系统地验证新数据。它是我们所知道的用于管理数据管道中不可避免地增长的复杂性的最佳工具。

    我们希望它能像帮助我们一样帮助你。主要收获:

    • 这篇演讲将教你如何使用“远大前程”来更快地利用数据完成更多工作
    • 节省数据清理和修改的时间。
    • 加速ETL和数据规范化。
    • 简化分析师到工程师的交接。
    • 监控生产数据管道和数据产品中的数据质量。
    • 简化数据管道崩溃时的调试。
    安倍龚