Yonghong Z-Suite V7.0 白皮书

<< Click to Display Table of Contents >>

当前位置:  Yonghong Z-Suite新增功能白皮书 

Yonghong Z-Suite V7.0 白皮书

Previous pageReturn to chapter overviewNext page

重点新增功能详述

1.自服务数据准备

自服务数据准备查询

通过以可视化的工作流方式,对数据进行轻度建模与转换。用户操作过程更流畅,全视图化界面方便用户对数据结构及细节进行查看了解。

在自服务查询中,用户可以直接利用已建好的查询进行建模,同时也可以将外部多种数据源直接引入进行数据建模及转换。提供对数据进行分组与汇总、逆透视表转化等转变数据结构的功能,同时新增加多种数据转换功能如:值映射、去除空格、去除重复记录、缺失值替换、拆分列为多列、创建组。

自服务数据模块,通过连线颜色及提示信息,实时展示各数据节点的性能指标,将性能信息及时通告给用户。通过性能检测动画为用户展示数据模型的整体性能状态。

clip0001

 

优化SQL语句输入体验

语法提示:系统自动提示SQL中的关键词,如SELECT、SUM函数等,如下图:

clip0002

 

高亮显示:关键字会高亮为蓝色、字符串会高亮为橙色、注释会高亮为绿色。如下图:

clip0003

语法检测:在刷新元数据时,系统自动检测SQL语法,并对SQL语法错误弹出提示框。

 

Hive,Spark连接性能优化

获得较快读取数据执行速度,包括将表达式压入数据库,limit(编程上的改进Max row),get meta刷新元数据的改进。

 

优化GENERIC数据连接

提供定制开发接口,以便接入客户特殊数据库类型。同时针对GENERIC可连接Kylin数据库。

 

同一个Excel中的多个Sheets批量导入功能

同一个Excel文件包含多个sheet页的情况,支持将多个sheet页中的所有数据批量导入进一个查询中。

clip0004

 

2.可视化模块

查看报告支持HTML5

带来极致的视觉盛宴及流畅的交互体验,增强产品跨平台兼容能力,性能展现更加卓越。查看报告支持H5展示和Flash展示,用户可自行配置展示形式。

 

普通表格中冻结窗格

新增冻结窗格功能,旨在解决表格列数过多,不易对比查看的问题。通过冻结窗格功能,用户可以对一列或数列的位置进行固定,从而对比固定列与滚动列的数据情况,增强了数据阅读的直观性。

clip0005

 

地图样式支持灵活配色

用户可以自由选择地图边界线颜色,背景颜色,颜色透明度,使地图配色更加灵活多变。

clip0006

 

优化图表的象限样式设置

优化轴位置和标签位置的设置方式,可分别快速设置X、Y轴的相对位置,得到所需象限图。

clip0007

 

clip0008

 

仪表盘订阅功能

用户可订阅可视化数据报告,并自行定制发送时间表,系统将在用户指定时间发送仪表盘信息到指定收件人邮箱。

clip0009

 

按组或角色添加收件人和抄送人邮箱地址

发送邮件选择地址时,提供按组、按角色两种查看方式对用户进行快速筛选,同时支持直接添加组和角色到收件人和抄送人中。添加组的效果等同于添加组内全部用户,添加角色的效果等同于添加所有赋予该角色的用户。

clip00010

 

图表的目标线度量支持定制算法

用户可以根据所图表所绑定的度量直接进行最大值、最小值、平均数、中位数、四分位数的计算并生成对应的目标线。同时支持引用参数,用于生成动态的目标线。

clip00011

 

3.企业级管理模块

优化监控系统

1)增加首页概览界面,支持管理员监控整个系统运行状态、资源分布情况、了解资源执行情况等。概览页面主要内容如下:

 

系统指标:显示当前节点的内存使用比例、仪表盘总数、查询/集市查询的总数、定时任务成功/失败数量、在线用户数/总数;

24小时内允许查询数量趋势:显示24小时允许的集市查询、普通查询的数量,可以整体查看系统任务执行并发峰值,以决定是否需要避开并发高峰期,便于及时调整定时任务的调度及运行时间;

查询类型分布:展示整个系统中各个类型查询的数量分布情况;

查询执行时长Top10:展示24小时内,查询平均运行时长的Top10;

仪表盘访问Top10:展示24小时内,仪表盘访问量的Top10;

定时任务类型分布:展示整个系统中各类型的作业数量分布情况;

近一个月作业出错情况:统计一个月内作业出错的次数(目前只统计一个周内的出错次数)

集市节点状态:展示整个系统各节点的类型及状态;

clip00012

 

2)优化系统内存信息监控页面,增加展示信息“计算结果缓存”、“交换文件数量”和“交换文件大小”,显示打开此监控时系统的实时信息。

clip00013

 

3)优化仪表盘所依赖查询的信息统计页面,增加了针对查询所使用的数据来源、相关增量导入任务及任务所使用查询的相关信息。该页面展示了以仪表盘为主的相关查询、数据源、定时任务间的血缘分布关系。

clip00014

 

4)优化运行资源信息监控统计,增加了历史信息查看界面(可在当前运行记录和历史运行记录之间进行快速切换查看),可查看以往运行资源的相关信息,仪表盘总运行时间及用户别名信息。

clip00015

5)“用户信息操作监控统计”报表中,追加了对用户导入、导出资源;系统设置操作的信息记录。

 

附件以图片形式添加到邮件正文

通过邮件将仪表盘分享给他人时,支持将仪表盘以图片形式添加到邮件正文,且仪表盘图片可放置在正文任意位置。

clip00016

clip00017

 

定时任务导出

资源导出模块支持定时任务导出。被依赖资源中,会自动添加和定时任务相关的查询、仪表盘、任务、触发器和图片等资源。

clip00018

 

导入资源进度反馈

导入jar包大于13M时,导入过程会显示进度反馈,帮助用户实时了解资源导入进程。

clip00019

 

许可证过期提醒

许可证即将过期时,系统会及时提醒用户更换许可证,避免因许可证过期影响用户对产品的使用。

在启动产品和使用产品过程中,系统将定期检测许可证的剩余时间。用户可直接在提示信息对话框中进行许可证的更新操作。

clip00020

 

访问节点时,如果触发了提醒,则同时提醒将要过期的所有节点信息,如下图所示:

clip00021

 

许可证过期提醒的触发条件:许可证于10天内过期时,通知admin用户;许可证于3天内过期时,通知同一许可证下的所有用户。

 

4.大数据模块

优化数据集市中导入数据的处理行为

用户可以对导入到数据集市中数据的Meta添加时间信息,并利用Meta中的时间信息来删除相关数据。

 

5.深度分析模块

使用R脚本生成图片,并添加到仪表盘

用户可以编写R脚本绘制所需图片,并将该图片应用到数据分析报告中。如下图,使用R脚本绘制盒须图:

clip00022

 

6.移动端

全新的Html5技术框架

通过BI制作的报告,统一以HTML5的标准发布至移动端,配合完善的企业级管理,提供团队从Android、IOS等多应用平台的实时性、安全性的访问。

公网与内网部署:提供公网与内网的访问限制;

账户与权限:账户与权限的分配由BI产品中的企业级管理统一创建和分配。

 

优化工作流程及交互操作

优化笔刷、缩放等分析工具的交互效果,新增单击、双击、长按等手势操作,进一步提升用户在移动端的数据分析体验。

新增清除功能,一键清除多个图表上的多次笔刷或缩放效果。

单击手势为选中操作,与分析工具栏相配合。

双击手势可快速开启笔刷,单击切换笔刷对象。

 

关注功能

新增关注功能,辅助用户聚焦于高频率的数据监控及分析。对指定报表,添加关注后,用户可通过下方Tab在“关注”和“全部”报表间切换。

 

新增功能点概览

1.自服务数据准备

序号

新增功能

1

自服务数据准备查询

2

按名称和别名搜索数据段

3

查看数据特征值

4

数据段自定义排序

5

优化SQL语句输入体验

6

新增大数据库连接类型Presto、 Impala

7

优化Hive,Spark连接性能

8

优化GENERIC数据连接

9

同一个Excel中多个Sheets批量导入

10

Excel查询,删除无效行功能

11

脚本默认值优化

 

2.可视化模块

序号

新增功能

1

查看报告支持HTML5

2

普通表格冻结窗格

3

交叉表对无关联数据格子设置样式

4

地图样式灵活配色

5

表格组件支持选中多个格子同时单元格格式

6

查看报告时,支持查看组件名称信息

7

工具栏中增加小数点格式设置的快捷方式

8

支持导出报告中隐藏组件的细节数据到excel/sheet页

9

优化图表的象限样式设置

10

优化未选值策略

11

优化雷达图

12

细分定义输出属性

13

新增PNG导出格式

14

折线图支持曲线画法

15

编辑界面操作的交互优化

16

导出数据到csv,由原来的checkbox改为了button,方便导出

17

词云属性设置增加“标记”选项卡

18

增加配置项,控制发送邮件界面是否显示“以收件人执行报表”和“抄送人”

19

订阅仪表盘

20

优化查看报告发送邮件界面,通过收件人列表信息来添加邮箱地址

21

图表的目标线度量支持定制算法

22

新增趋势线提示信息,描述其函数方程式

23

浏览器打开产品白屏时提醒用户升级或更换浏览器

24

支持定制模块名称、“我的仪表盘”文件夹名称和“另存为”等指定功能名称

25

仪表盘导出为Excel时,优化文本组件和文本参数组件导出效果

 

3.企业级管理模块

序号

新增功能

1

按组或角色添加收件人或抄送人邮箱地址

2

支持将附件仪表盘以图片形式添加到邮件正文

3

支持邮件标题直接引用仪表盘内参数

4

优化邮件重发机制

5

定时任务等待执行

6

定时任务使用文件夹管理作业

7

监控系统优化

8

支持定时任务导出

9

增加导入资源进度反馈

10

优化定时任务操作流程,更为易用的设置对单任务与多任务的过程

11

增加许可证过期提醒功能

12

增强系统密码管理安全级别

13

优化权限管理

14

优化“认证编辑、授权编辑、定时任务”的交互反馈

15

针对多节点,检测集群中各个节点的global_bi配置是否一致

 

4.大数据模块

序号

新增功能

1

优化数据集市中导入数据的处理行为

2

优化IO通信,通信缓冲区动态扩张

3

优化RPC通讯机制

4

提升字符串表达式处理效率

5

优化网络通信机制

6

对入集市数据,增加列分割的方式

7

优化缓存交换机制,提升缓存命中率

8

优化分层计算,针对整个系统的线程调度进行调整

9

优化DataGrid生命周期管理

10

优化系统全局的缓存管理,提高查询命中率,跨Dashboard的缓存命中机制

11

优化线程执行的内存调度

 

5.深度分析模块

序号

新增功能

1

使用R脚本生成图片,并应用到仪表盘中

 

6.安装包

序号

新增功能

1

tomcat日志接管、日志清理

2

安装时,检测用户的flash player安装情况

 

7.移动端

序号

新增功能

1

全新的Html5技术框架

2

优化工作流程及交互操作行为

3

新增关注功能

4

解决jdk1.6环境下不支持websocket的问题,用于移动端与服务器通讯

 

8.性能提升

序号

新增功能

1

提升PC端report加载性能

2

移动端(IOS)解决report打开时占用过多内存的问题,同时提升页面的加载速度,更多的支持HTML5的特性