仪表板

本节介绍如何使用 Spring Cloud Data Flow 的仪表板。spring-doc.cadn.net.cn

34. 引言

Spring Cloud Data Flow 提供了一个名为 Dashboard 的基于浏览器的 GUI 来管理以下信息:spring-doc.cadn.net.cn

  • 应用:“应用”选项卡列出了所有可用的应用程序,并提供了用于注册和注销它们的控件。spring-doc.cadn.net.cn

  • 运行时:“运行时”选项卡提供所有正在运行的应用程序的列表。spring-doc.cadn.net.cn

  • :“流”选项卡允许您列出、设计、创建、部署和销毁流定义。spring-doc.cadn.net.cn

  • 任务:“任务”选项卡允许您列出、创建、启动、计划和销毁任务定义。spring-doc.cadn.net.cn

  • 作业:“作业”选项卡允许您执行与批处理作业相关的功能。spring-doc.cadn.net.cn

启动 Spring Cloud Data Flow 后,仪表板可在以下位置获得:spring-doc.cadn.net.cn

例如,如果 Spring Cloud Data Flow 在本地运行,则仪表板位于localhost:9393/dashboard.spring-doc.cadn.net.cn

如果您启用了 HTTPS,则仪表板可在localhost:9393/dashboard. 如果您启用了安全性,则登录表单可在以下位置获得:localhost:9393/dashboard/#/login.spring-doc.cadn.net.cn

默认的仪表板服务器端口是9393.

下图显示了 Spring Cloud Data Flow 仪表板的打开页面:spring-doc.cadn.net.cn

The Spring Cloud Data Flow Dashboard
图 10.Spring Cloud 数据流仪表板

35. 应用程序

仪表板的“应用程序”选项卡列出了所有可用的应用程序,并提供了用于注册和注销它们的控件(如果适用)。 您可以使用批量导入应用程序作一次导入多个应用程序。spring-doc.cadn.net.cn

下图显示了仪表板中可用应用程序的典型列表:spring-doc.cadn.net.cn

List of available applications
图 11.可用应用程序列表

35.1. 批量导入应用程序

可以通过多种方式导入应用程序,这些方式可在“应用程序”页面上找到。 对于批量导入,应用程序定义应以属性样式表示,如下所示:spring-doc.cadn.net.cn

<type>.<name> = <coordinates>

以下示例显示了典型的应用程序定义:spring-doc.cadn.net.cn

task.timestamp=maven://org.springframework.cloud.task.app:timestamp-task:1.2.0.RELEASE
processor.transform=maven://org.springframework.cloud.stream.app:transform-processor-rabbit:1.2.0.RELEASE

在“从 HTTP URI 位置导入应用程序坐标”部分中,可以指定指向存储在其他地方的属性文件的 URI,它应包含格式如上一个示例所示的属性。 或者,通过使用“从属性文件导入应用程序坐标”部分中的“应用作为属性”文本框,可以直接列出每个属性字符串。最后,如果属性存储在本地文件中,则“导入文件”选项将打开本地文件浏览器以选择该文件。 通过其中一条路线设置定义后,单击导入应用程序spring-doc.cadn.net.cn

下图显示了批量导入应用程序的一种方法的示例页面:spring-doc.cadn.net.cn

Bulk Import Applications
图 12.批量导入应用程序

36. 运行时间

仪表板应用程序的运行时选项卡显示所有正在运行的应用程序的列表。 对于每个运行时应用程序,将显示部署状态和已部署实例的数量。 单击应用程序 ID 可获得已用部署属性的列表。spring-doc.cadn.net.cn

下图显示了正在使用的“运行时”选项卡的示例:spring-doc.cadn.net.cn

List of running applications
图 13.正在运行的应用程序列表

37. 流

“流”选项卡有两个子选项卡:“定义”“创建流”。以下主题介绍如何使用每个主题:spring-doc.cadn.net.cn

37.1. 使用流定义

仪表板的“流”部分包括“定义”选项卡,该选项卡提供流定义列表。 在那里,您可以选择部署或取消部署这些流定义。 此外,您可以通过单击“销毁”来删除定义。 每行左侧都有一个箭头,您可以单击该箭头以查看定义的可视化表示。 将鼠标悬停在可视化表示中的框上可显示有关应用程序的更多详细信息,包括传递给它们的任何选项。spring-doc.cadn.net.cn

在以下屏幕截图中,timer流已扩展以显示视觉表示:spring-doc.cadn.net.cn

List of Stream Definitions
图 14.流定义列表

如果单击详细信息按钮,视图将更改以显示该流和任何相关流的可视化表示。 在前面的示例中,如果单击timerstream,视图将更改为以下视图,这清楚地显示了三个流之间的关系(其中两个流正在利用timer流):spring-doc.cadn.net.cn

Stream Details Page
图 15.流详细信息页面

37.2. 创建流

仪表板的 Streams 部分包括 Create Stream 选项卡,这使得 Spring Flo 设计器可用。设计器是一个画布应用程序,它提供了一个用于创建数据管道的交互式图形界面。spring-doc.cadn.net.cn

在此选项卡中,您可以:spring-doc.cadn.net.cn

您应该观看此截屏视频,其中重点介绍了一些“Flo for Spring Cloud Data Flow”功能。 Spring Flo wiki 包含有关核心 Flo 功能的更详细内容。spring-doc.cadn.net.cn

下图显示了正在使用的 Flo 设计器:spring-doc.cadn.net.cn

Flo for Spring Cloud Data Flo
图16.Flo for Spring Cloud 数据流

37.3. 部署流

流部署页面包括选项卡,这些选项卡提供了设置部署属性和部署流的不同方法。 以下屏幕截图显示了foobar (time | log).spring-doc.cadn.net.cn

可以使用以下命令定义部署属性:spring-doc.cadn.net.cn

您可以在两个视图之间切换。spring-doc.cadn.net.cn

表单生成器提供了更强的输入验证。
Form builder
图 17.下图显示了表单生成器
Free text
图18.下图显示了自由文本中的相同属性

37.4. 访问流日志

部署流应用程序后,可以从 Stream 访问其日志summary页面,如下图所示:spring-doc.cadn.net.cn

Stream Logs

37.5. 创建扇入和扇出流

扇入和扇出一章中,您可以了解如何使用命名目标来支持扇入和扇出用例。 UI还为命名目标提供专用支持:spring-doc.cadn.net.cn

Fan-in and Fan-out example
图 19.Flo for Spring Cloud 数据流

在此示例中,我们有来自 HTTP 源JDBC 源的数据,这些数据正在发送到 sharedData 通道,这代表了一个扇入用例。 在另一端,我们有一个 Cassandra Sink 和一个订阅到 sharedData 通道的文件接收器,这代表了一个扇出用例。spring-doc.cadn.net.cn

37.6. 创建分流

使用仪表板创建分流非常简单。 假设您有一个由 HTTP 源文件接收器组成的流,并且您想访问该流 以将数据发送到 JDBC 接收器。 要创建分流,请将 HTTP 源的输出连接器连接到 JDBC 接收器。 连接显示为虚线,表示您创建了分流。spring-doc.cadn.net.cn

Tap stream example
图20.创建分流

主流(HTTP 源文件接收器)将自动命名,以防尚未提供流的名称。 创建分流时,必须始终显式命名主流。 在上图中,主流被命名为 HTTP_INGESTspring-doc.cadn.net.cn

通过使用仪表板,您还可以切换主流,使其成为辅助分流。spring-doc.cadn.net.cn

Switch tap stream to primary stream
图 21.将主流更改为辅助分流

将鼠标悬停在现有主流上,即 HTTP 源文件接收器之间的线。 出现几个控件图标,通过单击标有切换到/从水龙头切换的图标, 您将主流更改为分流。 对分流流执行相同的作,并将其切换到主流。spring-doc.cadn.net.cn

End result of switching the tap stream to a primary stream
图 22.切换主流的最终结果
直接与命名目标交互时, 可以有“n”组合(输入/输出)。这允许您创建涉及 各种各样的数据源和目标。

37.7. 导入和导出流

仪表板的导入/导出选项卡包括一个页面,该页面提供导入和导出流的选项。spring-doc.cadn.net.cn

下图显示了流导出页面:spring-doc.cadn.net.cn

Stream Utils Export
图23.流实用程序导出页面

导入流时,必须从有效的 JSON 文件导入。您可以手动起草文件,也可以从流导出页面导出文件。spring-doc.cadn.net.cn

Stream Utils Import
图24.流实用程序导入页面

导入文件后,您将确认作是否成功完成。spring-doc.cadn.net.cn

Stream Utils Import Result
图 25.流实用程序导入结果页面

38. 任务

仪表板的“任务”选项卡目前有三个选项卡:spring-doc.cadn.net.cn

38.1. 应用程序

每个应用程序都将一个工作单元封装到一个可重用的组件中。 在数据流运行时环境中,应用程序允许您为流和任务创建定义。 因此,“任务”选项卡中的“应用程序”选项卡允许您创建任务定义。spring-doc.cadn.net.cn

您还可以使用此选项卡创建批处理作业。

下图显示了任务应用程序的典型列表:spring-doc.cadn.net.cn

List of Task Apps
图26.任务应用程序列表

在此屏幕上,您可以执行以下作:spring-doc.cadn.net.cn

38.1.1. 查看任务应用程序详细信息

在此页面上,您可以查看所选任务应用程序的详细信息,包括该应用程序的可用选项(属性)列表。spring-doc.cadn.net.cn

38.2. 定义

此页面列出了数据流任务定义,并提供了用于启动或销毁这些任务的作。spring-doc.cadn.net.cn

下图显示了“定义”页:spring-doc.cadn.net.cn

List of Task Definitions
图 27.任务定义列表

38.2.1. 创建任务定义

下图显示了由时间戳应用程序以及可用于创建任务定义的任务应用程序列表组成的任务定义:spring-doc.cadn.net.cn

List of Task Applications

在此页上,您还可以指定在应用程序部署期间使用的各种属性。 对任务定义感到满意后,可以单击 创建任务 按钮。然后,一个对话框要求输入任务定义名称和描述。至少必须为新定义提供名称。spring-doc.cadn.net.cn

38.2.2. 创建组合任务定义

仪表板包括“创建组合任务”选项卡,该选项卡提供了用于创建组合任务的交互式图形界面。spring-doc.cadn.net.cn

在此选项卡中,您可以:spring-doc.cadn.net.cn

在[创建组合任务]界面中,可同时输入参数键和参数值,定义一个或多个任务参数。spring-doc.cadn.net.cn

任务参数未键入。

下图显示了组合任务设计器:spring-doc.cadn.net.cn

Composed Task Designer
图 28.组合任务设计器

38.2.3. 启动任务

创建任务定义后,您可以通过仪表板启动任务。 为此,请单击“任务”选项卡,然后按 选择要启动的任务Launch. 下图显示了“任务启动”页面:spring-doc.cadn.net.cn

Task Launch
图29.任务启动页面

38.2.4. 导入/导出任务

导入/导出”页面提供了导入和导出任务的选项。这是通过单击页面左侧的“导入/导出”选项来完成的。从这里,单击导出任务:使用所选任务创建 JSON 文件选项。这Export Tasks(s)页面出现。spring-doc.cadn.net.cn

下图显示了任务导出页面:spring-doc.cadn.net.cn

Tasks Utils Export
图30.“任务实用程序导出”页面

同样,您可以导入任务定义。为此,请单击 导入/导出 页面左侧的选项。从这里,单击 导入任务:从 JSON 文件导入任务 选项以显示 导入任务 页面。在“导入任务”页面上,必须从有效的 JSON 文件导入。您可以手动起草文件,也可以从“任务导出”页面导出文件。spring-doc.cadn.net.cn

Tasks Utils Import
图31.“任务实用程序导入”页面

导入文件后,您将收到有关作是否成功完成的确认。spring-doc.cadn.net.cn

Tasks Utils Import Result
图32.“任务实用程序导入结果”页面

38.3. 执行

任务执行”选项卡显示当前正在运行和已完成的任务执行。在此页面中,您可以向下钻取到“任务执行详细信息”页面。此外,您可以重新启动任务执行或停止正在运行的执行。spring-doc.cadn.net.cn

最后,可以清理一个或多个任务执行。此作会从基础持久性存储中删除任何关联的任务或批处理作业。此作只能针对任务执行触发,并级联到子任务执行(如果有)。spring-doc.cadn.net.cn

下图显示了“执行”选项卡:spring-doc.cadn.net.cn

List of Task Executions
图 33.任务执行列表

38.4. 执行细节

对于“任务执行”选项卡上的每个任务执行,您可以通过单击任务执行的执行 ID 来检索有关特定执行的详细信息。spring-doc.cadn.net.cn

List of Task Executions

在此屏幕上,您不仅可以查看任务执行页面的信息,还可以查看:spring-doc.cadn.net.cn

此外,您还可以触发以下作:spring-doc.cadn.net.cn

38.4.1. 停止执行任务

要向平台提交停止任务执行请求,请单击需要停止的任务执行旁边的下拉按钮。 现在点击 停止任务 选项。仪表板将显示一个对话框,询问您是否确定要停止任务执行。如果是这样,请单击Stop Task Execution(s).spring-doc.cadn.net.cn

Stop Executing Tasks
通过使用远程分区的 Spring Batch 应用程序启动的子 Spring Cloud Task 应用程序不会停止。

39. 工作

仪表板的“作业执行”选项卡允许您检查批处理作业。 屏幕的主要部分提供了作业执行的列表。 批处理作业是每个执行一个或多个批处理作业的任务。 每个作业执行都有对任务执行 ID 的引用(在“任务 ID”列中)。spring-doc.cadn.net.cn

作业执行列表还显示基础作业定义的状态。 因此,如果已删除基础定义,则“状态”列中会显示“未找到定义”。spring-doc.cadn.net.cn

您可以对每个作业执行以下作:spring-doc.cadn.net.cn

单击停止按钮实际上会向正在运行的作业发送停止请求,该作业可能不会立即停止。

下图显示了“作业”选项卡:spring-doc.cadn.net.cn

List of Job Executions
图 34.作业执行列表

39.1. 作业执行详细信息

启动批处理作业后,“作业执行详细信息”页面将显示有关该作业的信息。spring-doc.cadn.net.cn

下图显示了“作业执行详细信息”页面:spring-doc.cadn.net.cn

Job Execution Details
图35.作业执行详细信息

“作业执行详细信息”页面包含已执行步骤的列表。 您可以通过单击放大镜图标进一步深入了解每个步骤执行的详细信息。spring-doc.cadn.net.cn

39.2. 步骤执行详细信息

“步骤执行详细信息”页面提供有关作业中单个步骤的信息。spring-doc.cadn.net.cn

下图显示了“步骤执行详细信息”页面:spring-doc.cadn.net.cn

Step Execution History
图36.步骤执行详细信息

“步骤执行详细信息”屏幕提供了所有步骤执行上下文键值对的完整列表。spring-doc.cadn.net.cn

对于异常,“退出说明”字段包含其他错误信息。 但是,此字段最多可以有 2500 个字符。 因此,在长异常堆栈跟踪的情况下,可能会发生错误消息的修剪。 发生这种情况时,请检查服务器日志文件以获取更多详细信息。

39.3. 步骤执行历史

“步骤执行历史记录”下,您还可以查看与所选步骤关联的各种指标,例如持续时间、读取计数、写入计数以及其所有执行的其他指标。 对于每个指标,有 5 个属性:spring-doc.cadn.net.cn

步骤执行包含以下指标:spring-doc.cadn.net.cn

  • 提交计数 - 给定步骤的所有执行的提交次数的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • 持续时间 - 给定步骤的所有执行持续时间的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • 每次读取的持续时间 - 给定步骤的所有执行的每次读取持续时间的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • FilterCount - 给定步骤的所有执行的过滤器数的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • 流程跳过计数 - 给定步骤的所有执行的流程跳过的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • 读取计数 - 给定步骤的所有执行的读取次数的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • 读取跳过计数 - 给定步骤的所有执行的读取跳过次数的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • 回滚计数 - 给定步骤的所有执行的回滚次数的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • 写入计数 - 给定步骤的所有执行的写入次数的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

  • 写入跳过计数 - 给定步骤的所有执行的跳过次数的最大值、最小值、平均值和标准差。spring-doc.cadn.net.cn

40. 调度

您可以从 SCDF 仪表板为任务定义创建计划。有关更多信息,请参阅微型站点的“计划批处理作业”部分。spring-doc.cadn.net.cn

41. 审计

仪表板的“审核”页面允许您访问记录的审核事件。审核事件 记录为:spring-doc.cadn.net.cn

下图显示了“审核记录”页:spring-doc.cadn.net.cn

List of available audit records
图 37.审计记录列表概述

通过单击显示详细信息图标(右侧圆圈中的“i”),您可以获得有关 审核详细信息:spring-doc.cadn.net.cn

Details of a single audit record
图38.列出审计记录的详细信息

通常,审计提供以下信息:spring-doc.cadn.net.cn

审计数据属性的写入值取决于执行的审计作作类型。 例如,在创建计划时,任务定义的名称 编写任务定义属性、部署属性和命令行参数 到持久性存储。spring-doc.cadn.net.cn

在保存审核记录之前,将以尽最大努力的方式清理敏感信息。 正在检测到以下任何键,其敏感值为 蒙面:spring-doc.cadn.net.cn