<< Click to Display Table of Contents >> 限定抽取数据的数量复制链接 |
1、限定抽取数据的行数
•在bi.properties中配置全局属性extract.max.rows,限制每个数据集抽取的总行数。
•在bi.properties中配置全局属性level1.folder.extract.total.max.rows,限制数据集根路径文件夹抽取的总行数。
•在数据源上添加参数_EXTRACT_MAX_ROWS_,值设置为长整数数据。此参数只能设置在数据源上,无法设置到数据集或其它资源上。此参数默认勾选“二次引用时不显示”,这样基于此数据源创建的数据集里,编辑参数窗口里看不到此参数。
超过设置的最大行数就中止抽取数据,任务失败,不会有数据抽取到集市中。
➢说明:
如果是跨源的组合和自服务数据集,每个源上或部分源上有参数配置,则取数据源上的最小值。
2、限定抽取数据的大小
•在bi.properties中配置全局属性extract.size.limit,限制每个数据集抽取的总大小。
•在bi.properties中配置全局属性level1.folder.extract.total.size.limit,限制数据集根路径文件夹抽取的总大小。
•在数据源上添加参数_EXTRACT_SIZE_LIMIT_,值设置为长整数数据。此参数只能设置在数据源上,无法设置到数据集或其它资源上。此参数默认勾选“二次引用时不显示”,这样基于此数据源创建的数据集里,编辑参数窗口里看不到此参数。
➢说明:
如果是跨源的组合和自服务数据集,每个源上或部分源上有参数配置,则取数据源上的最小值。
•在bi.properties中配置全局属性cluster.extract.total.size.limit,限制整个集群抽取数据的总大小。