Eric Yatskowitz

大规模大数据产品和解决方案的开发给平台架构师、数据科学家和数据工程师团队带来了许多挑战。bob体育客户端下载虽然我们很容易发现自己在竖井中工作，但成功的组织会在各个学科之间紧密合作，这样问题就可以被理解，提出的模型和解决方案可以在数tb的数据上进行扩展和优化。在本次会议中，T-Mobile营销解决方案(TMS)数据科学团队将展示支持TMS内部产品和服务的平台架构和生产框架。bob体育客户端下载这些服务由Apache Spark技术提供支持，在内部部署和云环境的混合环境中运行。作为一个展示的例子，我们将讨论从我们的广告欺诈检测服务中学到的主要经验教训和最佳实践。重点是我们如何在Spark MLlib框架之外扩展数据科学算法。我们还将演示各种Spark优化技巧，以提高产品性能和MLflow的跟踪和报告利用率。我们希望展示我们从构建端到端大数据产品的过程中学到的最佳实践。