Ankur Pathela

在Facebook, Apache火花处理批处理工作负载大,有时可能处理敏感数据,需要保护和隔离覆盖所有表面的身份验证、授权和加密。与多个团队的工作运行在数据中心和geo-distributed地区,引发参与者(司机、执行人、洗牌服务)需要安全通信网络跨越大的地理区域。火花在FB还运行在多租户环境需要执行严格的访问控制策略,保证数据保护和隔离工作。操作在这个规模提供了几个可伸缩性挑战,我们将分享我们的方法解决一些在这个演讲这样的挑战。

更具体地说,作为这次演讲的一部分,我们将分享如何部署TLS加密火花工作在交通安全数据在不可信的网络,并讨论这样做的意义和开销。此外,我们将讨论如何租户隔离,安全性和细粒度访问控制(即。行/列级安全性)设计和实现,以及我们在扩展签名的生成和验证的工作访问令牌和就业资源分布(文件、档案和jar)。