激活航空数据与实时毫升

连接划分数据,预测未来

商业航空公司通常提供数以百万计的人每年在全国各地。帮助航空公司更好地服务每一个乘客和开发更有价值的评估他们的飞行操作,美国交通部需要解锁航空数据并开始开发一个实时数据库内部商业航空飞行(CFD)。

通过利用公共游泳——美国联邦航空管理局的数据信息管理系统数据库,如天气、航班,航空和监测信息,USDOT希望更准确地预测未来航空货运交通模式和商业航空公司提供更清晰的财务预测。但结合多个数据服务、溪流和组件从不同的出版商是复杂的,特别是在这一行业的传统本地平台来管理数据,而不是像砖基于云的解决方案。bob体育客户端下载

“建立大数据平台总是挑战,“Mehdi Hbob体育客户端下载ashemipour说USDOT数据科学家。“我们需要知道我们从事大数据和基础设施是必要的来处理它。使用各种技术设计这样一个系统是非常复杂的,因为我们知道大数据不是100%可靠,它不是那么精确的统计报告要求。我们需要能够控制的质量数据,并密切关注任何数据实时处理”。

系统还需要规模迅速——没有降低性能和没有任何繁重或手动审查由USDOT数据团队。

为预测分析奠定基础

游云分发服务(SCDS)是一个联邦航空管理局(FAA)基于云的服务,提供公开FAA游泳FAA-approved消费者的内容。获得关键洞察准时航班,航班延误或取消,乘客的数量影响每个事件,USDOT试图利用他们的公共游泳的数据集,如交通流量管理和终端数据分布和运行分析所有数据来预测多个场景相关的航班,机场和乘客的行为。

仔细评估后,USDOT选择微软Azure和砖Lakehouse平台因为民主化他们所有的各种数据源的能力,包括本地数据库Oracle和Sybase,实时流媒体通过Apache卡bob体育客户端下载夫卡。

“砖给用户的一种有效的方式创建的工作时间表,集群规模和运行分析和BI笔记本,“Hashemipour说。

三角洲湖,USDOT现在可以方便地利用他们所有的数据并建立可靠和高性能数据管道下游分析和机器学习工作负载。批处理和流数据自由流动,他们能够养活信息表等主要工具和权力BI可视化数据分析见解和机器学习模型,使他们能够更好地理解和预测交通流模式和乘客的需要。

USDOT数据团队更有效率的这些天,。砖,他们所有的团队——从数据科学家和工程师数据分析师,能够更好地进行协作和与他们的数据更有成效。“我们现在有一个非常有效的方式工作,“Hashemipour说。“这是简单的创建工作安排,运行集群和笔记本,并组织和分析来自多个数据源的数据。这确实加速我们的交付新功能的能力,全面提升乘客体验。”

达到更高的高度,同时保持成本停飞

砖,USDOT开发一个灵活的数据环境,可以部署在任何地方或延长分析其他游泳或similarly-streamed信息以更低的成本。通过云的成本效益和砖的自动化基础设施功能,USDOT已经能够实现一个独特的方法对于数据转换和处理,减少收集和消化的成本流数据90%相比其他基于云的解决方案。

砖提供一切USDOT数据团队需要自动化的复杂数据摄入和分析从多个流的各种分析和机器学习下游工作负载。今天,他们可以用最少的努力整理数据,如果需要在多个环境中,对业务做出更准确的决定和性能。

“现在我们知道构建和自动化,可以安全有效地迭代系统上的基础设施,没有限制我们如何使用实时航空数据,“Hashemipour说。

随着系统的不断发展,USDOT计划推进其功能通过开放数据管道额外的分析和机器学习工作负载,进一步提高数据驱动的预测和决策的准确性,并提供更有针对性的信息,以帮助商业航空公司更好地为乘客服务。