<< Click to Display Table of Contents >> Yonghong Z-Suite V7.0 白皮书 |
❖重点新增功能详述
1.自服务数据准备
自服务数据准备查询
通过以可视化的工作流方式,对数据进行轻度建模与转换。用户操作过程更流畅,全视图化界面方便用户对数据结构及细节进行查看了解。
在自服务查询中,用户可以直接利用已建好的查询进行建模,同时也可以将外部多种数据源直接引入进行数据建模及转换。提供对数据进行分组与汇总、逆透视表转化等转变数据结构的功能,同时新增加多种数据转换功能如:值映射、去除空格、去除重复记录、缺失值替换、拆分列为多列、创建组。
自服务数据模块,通过连线颜色及提示信息,实时展示各数据节点的性能指标,将性能信息及时通告给用户。通过性能检测动画为用户展示数据模型的整体性能状态。
优化SQL语句输入体验
语法提示:系统自动提示SQL中的关键词,如SELECT、SUM函数等,如下图:
高亮显示:关键字会高亮为蓝色、字符串会高亮为橙色、注释会高亮为绿色。如下图:
语法检测:在刷新元数据时,系统自动检测SQL语法,并对SQL语法错误弹出提示框。
Hive,Spark连接性能优化
获得较快读取数据执行速度,包括将表达式压入数据库,limit(编程上的改进Max row),get meta刷新元数据的改进。
优化GENERIC数据连接
提供定制开发接口,以便接入客户特殊数据库类型。同时针对GENERIC可连接Kylin数据库。
同一个Excel中的多个Sheets批量导入功能
同一个Excel文件包含多个sheet页的情况,支持将多个sheet页中的所有数据批量导入进一个查询中。
2.可视化模块
查看报告支持HTML5
带来极致的视觉盛宴及流畅的交互体验,增强产品跨平台兼容能力,性能展现更加卓越。查看报告支持H5展示和Flash展示,用户可自行配置展示形式。
普通表格中冻结窗格
新增冻结窗格功能,旨在解决表格列数过多,不易对比查看的问题。通过冻结窗格功能,用户可以对一列或数列的位置进行固定,从而对比固定列与滚动列的数据情况,增强了数据阅读的直观性。
地图样式支持灵活配色
用户可以自由选择地图边界线颜色,背景颜色,颜色透明度,使地图配色更加灵活多变。
优化图表的象限样式设置
优化轴位置和标签位置的设置方式,可分别快速设置X、Y轴的相对位置,得到所需象限图。
仪表盘订阅功能
用户可订阅可视化数据报告,并自行定制发送时间表,系统将在用户指定时间发送仪表盘信息到指定收件人邮箱。
按组或角色添加收件人和抄送人邮箱地址
发送邮件选择地址时,提供按组、按角色两种查看方式对用户进行快速筛选,同时支持直接添加组和角色到收件人和抄送人中。添加组的效果等同于添加组内全部用户,添加角色的效果等同于添加所有赋予该角色的用户。
图表的目标线度量支持定制算法
用户可以根据所图表所绑定的度量直接进行最大值、最小值、平均数、中位数、四分位数的计算并生成对应的目标线。同时支持引用参数,用于生成动态的目标线。
3.企业级管理模块
优化监控系统
1)增加首页概览界面,支持管理员监控整个系统运行状态、资源分布情况、了解资源执行情况等。概览页面主要内容如下:
•系统指标:显示当前节点的内存使用比例、仪表盘总数、查询/集市查询的总数、定时任务成功/失败数量、在线用户数/总数;
•24小时内允许查询数量趋势:显示24小时允许的集市查询、普通查询的数量,可以整体查看系统任务执行并发峰值,以决定是否需要避开并发高峰期,便于及时调整定时任务的调度及运行时间;
•查询类型分布:展示整个系统中各个类型查询的数量分布情况;
•查询执行时长Top10:展示24小时内,查询平均运行时长的Top10;
•仪表盘访问Top10:展示24小时内,仪表盘访问量的Top10;
•定时任务类型分布:展示整个系统中各类型的作业数量分布情况;
•近一个月作业出错情况:统计一个月内作业出错的次数(目前只统计一个周内的出错次数)
•集市节点状态:展示整个系统各节点的类型及状态;
2)优化系统内存信息监控页面,增加展示信息“计算结果缓存”、“交换文件数量”和“交换文件大小”,显示打开此监控时系统的实时信息。
3)优化仪表盘所依赖查询的信息统计页面,增加了针对查询所使用的数据来源、相关增量导入任务及任务所使用查询的相关信息。该页面展示了以仪表盘为主的相关查询、数据源、定时任务间的血缘分布关系。
4)优化运行资源信息监控统计,增加了历史信息查看界面(可在当前运行记录和历史运行记录之间进行快速切换查看),可查看以往运行资源的相关信息,仪表盘总运行时间及用户别名信息。
5)“用户信息操作监控统计”报表中,追加了对用户导入、导出资源;系统设置操作的信息记录。
附件以图片形式添加到邮件正文
通过邮件将仪表盘分享给他人时,支持将仪表盘以图片形式添加到邮件正文,且仪表盘图片可放置在正文任意位置。
定时任务导出
资源导出模块支持定时任务导出。被依赖资源中,会自动添加和定时任务相关的查询、仪表盘、任务、触发器和图片等资源。
导入资源进度反馈
导入jar包大于13M时,导入过程会显示进度反馈,帮助用户实时了解资源导入进程。
许可证过期提醒
许可证即将过期时,系统会及时提醒用户更换许可证,避免因许可证过期影响用户对产品的使用。
在启动产品和使用产品过程中,系统将定期检测许可证的剩余时间。用户可直接在提示信息对话框中进行许可证的更新操作。
访问节点时,如果触发了提醒,则同时提醒将要过期的所有节点信息,如下图所示:
许可证过期提醒的触发条件:许可证于10天内过期时,通知admin用户;许可证于3天内过期时,通知同一许可证下的所有用户。
4.大数据模块
优化数据集市中导入数据的处理行为
用户可以对导入到数据集市中数据的Meta添加时间信息,并利用Meta中的时间信息来删除相关数据。
5.深度分析模块
使用R脚本生成图片,并添加到仪表盘
用户可以编写R脚本绘制所需图片,并将该图片应用到数据分析报告中。如下图,使用R脚本绘制盒须图:
6.移动端
全新的Html5技术框架
通过BI制作的报告,统一以HTML5的标准发布至移动端,配合完善的企业级管理,提供团队从Android、IOS等多应用平台的实时性、安全性的访问。
公网与内网部署:提供公网与内网的访问限制;
账户与权限:账户与权限的分配由BI产品中的企业级管理统一创建和分配。
优化工作流程及交互操作
优化笔刷、缩放等分析工具的交互效果,新增单击、双击、长按等手势操作,进一步提升用户在移动端的数据分析体验。
新增清除功能,一键清除多个图表上的多次笔刷或缩放效果。
单击手势为选中操作,与分析工具栏相配合。
双击手势可快速开启笔刷,单击切换笔刷对象。
关注功能
新增关注功能,辅助用户聚焦于高频率的数据监控及分析。对指定报表,添加关注后,用户可通过下方Tab在“关注”和“全部”报表间切换。
❖新增功能点概览
1.自服务数据准备
序号 |
新增功能 |
---|---|
1 |
自服务数据准备查询 |
2 |
按名称和别名搜索数据段 |
3 |
查看数据特征值 |
4 |
数据段自定义排序 |
5 |
优化SQL语句输入体验 |
6 |
新增大数据库连接类型Presto、 Impala |
7 |
优化Hive,Spark连接性能 |
8 |
优化GENERIC数据连接 |
9 |
同一个Excel中多个Sheets批量导入 |
10 |
Excel查询,删除无效行功能 |
11 |
脚本默认值优化 |
2.可视化模块
序号 |
新增功能 |
---|---|
1 |
查看报告支持HTML5 |
2 |
普通表格冻结窗格 |
3 |
交叉表对无关联数据格子设置样式 |
4 |
地图样式灵活配色 |
5 |
表格组件支持选中多个格子同时单元格格式 |
6 |
查看报告时,支持查看组件名称信息 |
7 |
工具栏中增加小数点格式设置的快捷方式 |
8 |
支持导出报告中隐藏组件的细节数据到excel/sheet页 |
9 |
优化图表的象限样式设置 |
10 |
优化未选值策略 |
11 |
优化雷达图 |
12 |
细分定义输出属性 |
13 |
新增PNG导出格式 |
14 |
折线图支持曲线画法 |
15 |
编辑界面操作的交互优化 |
16 |
导出数据到csv,由原来的checkbox改为了button,方便导出 |
17 |
词云属性设置增加“标记”选项卡 |
18 |
增加配置项,控制发送邮件界面是否显示“以收件人执行报表”和“抄送人” |
19 |
订阅仪表盘 |
20 |
优化查看报告发送邮件界面,通过收件人列表信息来添加邮箱地址 |
21 |
图表的目标线度量支持定制算法 |
22 |
新增趋势线提示信息,描述其函数方程式 |
23 |
浏览器打开产品白屏时提醒用户升级或更换浏览器 |
24 |
支持定制模块名称、“我的仪表盘”文件夹名称和“另存为”等指定功能名称 |
25 |
仪表盘导出为Excel时,优化文本组件和文本参数组件导出效果 |
3.企业级管理模块
序号 |
新增功能 |
---|---|
1 |
按组或角色添加收件人或抄送人邮箱地址 |
2 |
支持将附件仪表盘以图片形式添加到邮件正文 |
3 |
支持邮件标题直接引用仪表盘内参数 |
4 |
优化邮件重发机制 |
5 |
定时任务等待执行 |
6 |
定时任务使用文件夹管理作业 |
7 |
监控系统优化 |
8 |
支持定时任务导出 |
9 |
增加导入资源进度反馈 |
10 |
优化定时任务操作流程,更为易用的设置对单任务与多任务的过程 |
11 |
增加许可证过期提醒功能 |
12 |
增强系统密码管理安全级别 |
13 |
优化权限管理 |
14 |
优化“认证编辑、授权编辑、定时任务”的交互反馈 |
15 |
针对多节点,检测集群中各个节点的global_bi配置是否一致 |
4.大数据模块
序号 |
新增功能 |
---|---|
1 |
优化数据集市中导入数据的处理行为 |
2 |
优化IO通信,通信缓冲区动态扩张 |
3 |
优化RPC通讯机制 |
4 |
提升字符串表达式处理效率 |
5 |
优化网络通信机制 |
6 |
对入集市数据,增加列分割的方式 |
7 |
优化缓存交换机制,提升缓存命中率 |
8 |
优化分层计算,针对整个系统的线程调度进行调整 |
9 |
优化DataGrid生命周期管理 |
10 |
优化系统全局的缓存管理,提高查询命中率,跨Dashboard的缓存命中机制 |
11 |
优化线程执行的内存调度 |
5.深度分析模块
序号 |
新增功能 |
---|---|
1 |
使用R脚本生成图片,并应用到仪表盘中 |
6.安装包
序号 |
新增功能 |
---|---|
1 |
tomcat日志接管、日志清理 |
2 |
安装时,检测用户的flash player安装情况 |
7.移动端
序号 |
新增功能 |
---|---|
1 |
全新的Html5技术框架 |
2 |
优化工作流程及交互操作行为 |
3 |
新增关注功能 |
4 |
解决jdk1.6环境下不支持websocket的问题,用于移动端与服务器通讯 |
8.性能提升
序号 |
新增功能 |
---|---|
1 |
提升PC端report加载性能 |
2 |
移动端(IOS)解决report打开时占用过多内存的问题,同时提升页面的加载速度,更多的支持HTML5的特性 |