查看和管理工作

本文描述的特性数据砖工作你可以访问UI视图,视图的历史运行工作,并查看工作运行的细节。学习使用砖CLI查看工作和运行工作,明白了乔布斯CLI(遗留)。学习使用工作API,请参阅乔布斯API

视图的工作

查看工作你可以访问列表,点击工作图标工作流在侧边栏。的工作选项卡中工作流界面列出了所有可用的信息工作,如工作的创造者,触发器的工作,如果有的话,最后的结果。

改变显示的列在工作列表中,点击设置图标并选择或取消选择列。

请注意

如果你有增加工作的限制支持这个工作空间,工作列表中仅显示25工作提高页面加载时间。使用左右箭头通过工作的完整列表页面。

您可以过滤工作的工作列表:

  • 使用关键字。如果你有增加就业限制功能支持该工作区,只支持通过关键词搜索的名称、ID、工作和工作标记字段。

  • 只选择你自己的工作。

  • 选择所有工作你有权限访问。这种过滤要求工作访问控制启用。

  • 使用标签。寻找一个标签创建只有一个键,在搜索框输入的关键。搜索键和值创建一个标签,你可以搜索键,值,或键和值。例如,对于一个标签的关键部门和价值金融,你可以搜索部门金融找到匹配的工作。搜索键和值,输入键和值冒号隔开;例如,部门:财务

您也可以点击任意列标题进行排序的列表工作(上升或下降)这一列。增加就业限制功能启用时,你可以只的名字,工作ID,或创建通过。默认排序的名字以升序排序。

点击乔布斯垂直省略访问操作的工作,例如,删除工作。

查看运行工作

您可以查看当前运行的列表和最近完成了工作你可以访问,包括运行开始由外部编制工具,如Apache气流或Azure数据工厂。查看最近的工作列表:

  1. 点击工作图标工作流在侧边栏。

  2. 的名字列,单击工作名称。的运行标签出现矩阵和列表视图的活动和运行完成。

矩阵视图显示运行的历史工作,包括每个工作任务。

运行总时间矩阵的行显示的总运行时间和运行的状态。查看运行的详细信息,包括开始时间、持续时间、和地位,悬停在酒吧运行总时间行。

每个单元的任务行代表一个任务和相应的任务的状态。查看每个任务的细节,包括开始时间、持续时间、集群和地位,悬停在细胞上的任务。

工作和任务跑酒吧的颜色表示的状态运行。成功的运行是绿色的,不成功的运行是红色的,和跳过运行是粉红色的。个人工作的高度和任务跑酒吧视觉显示运行时间。

如果您已经配置了一个预计完成时间,矩阵视图显示一个警告当运行的持续时间超过配置的时间。

默认情况下,运行列表视图显示:

  • 的开始时间。

  • 运行标识符。

  • 运行是否触发的工作安排或一个API请求,或手动开始。

  • 当前运行的时间工作或完成的总运行时间。显示一个警告如果持续时间超过一个配置预计完成时间

  • 火花日志的链接。

  • 运行的状态等待,运行,跳过,成功,失败的,终止,终止,内部错误,定时,取消了,取消,或等待重试

  • 点击乔布斯垂直省略访问上下文相关的操作,例如,停止一个活跃的运行或删除运行完成。

改变列显示在列表视图,点击设置图标并选择或取消选择列。

查看细节的工作运行的运行,点击链接开始时间列在列表视图。查看细节对于这个作业最近的成功运行,点击去最近的成功运行

砖保持你的工作运行的历史长达60天。如果你需要保持工作运行,砖建议之前输出结果的有效期。有关更多信息,请参见出口工作运行结果

查看工作运行细节

工作运行细节页面包含工作产出和日志的链接,包括每个任务的成功或失败的信息工作中运行。你可以访问工作运行的细节运行选项卡。查看工作运行的细节运行选项卡中,单击该链接的运行开始时间列在列表视图。回到运行点击选项卡的工作工作ID价值。

如果工作包含多个任务,点击任务查看任务运行细节,包括:

  • 集群的任务

    • 任务的火花UI

    • 日志的任务

    • 指标的任务

单击工作ID返回值运行选项卡。

任务运行历史观

查看运行的历史任务,包括成功和失败:

  1. 点击任务上工作运行细节页面。的任务运行细节页面出现。

  2. 选择任务运行的运行历史下拉菜单。

查看最近的工作运行

您可以查看当前的运行在一个工作区和最近完成了运行工作访问,包括运行开始由外部编制工具,如Apache气流或Azure数据工厂。查看最近的工作列表:

  1. 点击工作图标工作流在侧边栏。

  2. 单击工作运行选项卡显示工作列表。

完成运行数图显示工作运行的数量在过去的48小时内完成。默认情况下,图形显示失败,跳过,成功的工作。你也可以过滤图显示具体运行状态图或限制到一个特定的时间范围。的工作运行标签还包括一个表的工作从过去的67天。默认情况下,表包括细节失败,跳过,成功的工作。

请注意

如果工作的可见性控制启用,完成运行数图只显示当你点击我所拥有的

你可以过滤完成运行数运行状态:

  • 更新图显示当前工作运行或等待运行,点击活跃的运行

  • 更新图只显示完成,包括失败,成功,并跳过运行,点击完成运行

  • 更新图只显示运行,成功完成在过去的48小时内,点击成功的运行

  • 更新图只显示跳过运行时,点击跳过运行。运行跳过因为你超过了最大数量的并发运行在你的工作区或工作超过了最大数量的并发运行指定的作业配置。

  • 更新图只显示运行,完成一个错误状态,点击运行失败

当你点击任何过滤按钮,运行也运行表中更新的列表只显示工作运行匹配选择的地位。

限制中显示的时间范围完成运行数图,图中单击并拖动鼠标选择的时间范围。图和表更新显示运行只从所选的时间范围。

默认情况下,运行运行表中显示的列表:

  • 的开始时间。

  • 的名字与运行相关的工作。

  • 工作运行的用户名。

  • 运行是否触发的工作安排或一个API请求,或手动开始。

  • 当前运行的时间工作或完成的总运行时间。显示一个警告如果持续时间超过一个配置预计完成时间

  • 运行的状态等待,运行,跳过,成功,失败的,终止,终止,内部错误,定时,取消了,取消,或等待重试

  • 任何参数的运行。

  • 点击乔布斯垂直省略访问上下文相关的操作,例如,停止一个活跃的运行或删除运行完成。

改变显示的列在运行列表中,点击设置图标并选择或取消选择列。

前5名的错误类型表显示一个列表的最常见的错误类型选择的时间范围,你可以快速查看您的工作区中最常见的原因的工作问题。

查看工作运行细节,单击链接开始时间列的运行。查看工作细节,单击工作名称工作列。

视图血统信息工作

如果启用了统一目录在您的工作空间,您可以查看血统信息对于任何统一编目表中您的工作流。如果血统信息可供您的工作流,您将会看到一个链接中的上游和下游的计算表工作细节你的工作小组,工作运行细节小组工作运行,或任务运行细节面板为任务运行。点击链接来显示表的列表。单击表查看详细信息数据浏览

出口工作运行结果

您可以导出笔记本运行结果对所有工作类型和工作运行日志。

出口笔记本运行结果

你可以持续工作运行通过出口他们的结果。对于笔记本的工作运行,您可以出口稍后可以呈现的笔记本进口到你的砖工作区。

出口笔记本运行结果与单个任务:找工作

  1. 在工作中细节页面,单击查看详细信息链接的运行运行列的完成运行60天(过去)表。

  2. 点击导出到HTML

出口笔记本运行结果与多个工作任务:

  1. 在工作中细节页面,单击查看详细信息链接的运行运行列的完成运行60天(过去)表。

  2. 点击出口笔记本电脑的任务。

  3. 点击导出到HTML

出口工作运行日志

您还可以导出日志对你的工作运行。你可以设置你的工作自动交付通过工作日志DBFS或S3 API。看到new_cluster.cluster_log_conf对象传递给请求主体创建一个新工作操作(帖子/ /创建工作API)的工作。