数据集市信息统计

<< Click to Display Table of Contents >>

当前位置:  管理系统 > 监控预警 

数据集市信息统计

Previous pageReturn to chapter overviewNext page

对数据集市计算的监控包括对数据集市文件和对数据集市文件夹的监控(数据集市文件夹中包含所有数据集市文件)以及数据集市计算中的 Map 任务 &Reduce 任务的监控。

 

数据集市文件信息统计

在 “ 数据集市文件信息统计 ” 中统计了关于数据集市文件的信息,同时也能剔除相应的数据。比如,将序列号为 1 的信息剔除,点击剔除,然后保存,再次打开的时候序列号为 1 的用户信息就不存在了。

导出 PDF/Excel 是指:点击导出 PDF/Excel,就能将详细的信息以 PDF/Excel 的格式导出。返回按钮用于返回 “ 数据集市文件夹信息统计 ” 仪表盘。

数据集市文件1信息统计

 

数据集市文件夹信息统计

在 “ 数据集市文件夹信息统计 ” 下的 “ 文件夹名称 ” 字段,都有超链接功能。也就是说,进入预览模式下,点击 “ 文件夹名称 ” 的字段后,就能够跳转到相应的数据集市文件的信息统计界面。在 “ 数据集市文件夹的信息统计 ” 下,能够显示文件夹的大小和文件夹内所有文件保存的数据行数之和,也能剔除或激活相应的数据。

文件夹信息统计1

数据集市节点信息统计

数据节点的信息统计包括:所有节点当前状态、节点状态变化事件统计、Map 节点信息统计、Reduce 节点信息统计。

所有节点当前状态

节点信息统计1

节点状态变化事件统计

节点信息统计2

Map 节点信息统计

节点信息统计3

Reduce 节点信息统计

节点信息统计4

 

Map 任务 & Reduce 任务信息统计

Map 任务 &Reduce 任务信息统计主要统计的是 Map 任务和 Reduce 任务的执行任务数量、执行任务平均时间、执行任务具体时间。默认的筛选日期为当日,用户可以按照需求筛选日期。

Map 任务信息统计

suoyou

Map 任务信息统计图

map task pic

Reduce 任务信息统计

reduce

Reduce 任务信息统计图

mapreduce4

 

数据集市数据集任务信息统计

在 “ 数据集市数据集任务信息统计 ” 中,对数据集市数据集进行了详细信息的统计,并以饼图形式直观展示了查询数据集市文件夹次数的百分率和任务执行成功率。

数据集市数据集任务信息统计表

xinxitongjibiao

数据集市文件夹被查询次数百分率

文件夹执行次数

数据集市数据集任务执行成功率

succes1

 

数据集市数据集任务运行状态监控

“数据集市数据集任务运行状态监控”报表用来监控当前正在运行的数据集市数据集的运行状态。对数据集市数据集开始运行的时间、已经运行的时长、需要执行的任务总数、已经完成的Map、Reduce任务数进行了详细的统计。当鼠标悬停在“详情”上,可以触发显示“数据集市数据集任务运行状态节点详情"报表,详细显示集群中使用的Map、Reduce节点对应的任务总数与任务完成数。

 

数据集市数据集运行状态监控1