关闭 x
IT技术网
    技 采 号
    ITJS.cn - 技术改变世界
    • 实用工具
    • 菜鸟教程
    IT采购网 中国存储网 科技号 CIO智库

    IT技术网

    IT采购网
    • 首页
    • 行业资讯
    • 系统运维
      • 操作系统
        • Windows
        • Linux
        • Mac OS
      • 数据库
        • MySQL
        • Oracle
        • SQL Server
      • 网站建设
    • 人工智能
    • 半导体芯片
    • 笔记本电脑
    • 智能手机
    • 智能汽车
    • 编程语言
    IT技术网 - ITJS.CN
    首页 » SQL语言 »优化OLAP中的聚合(1)

    优化OLAP中的聚合(1)

    2015-11-17 00:00:00 出处:ITJS
    分享

    DBMS_AW 包有两个很有趣也很有用的存储过程,它们使你可以调整你的聚合过程。在OLAP项目中一个常见的问题是预先计算哪些等级以及在查询时计算哪些等级 大多数人们似乎认为你必须预先计算他们维度的所有等级。不过这个方法的缺点是数据加载和聚合过程会比你所期望的时间更长。那么是否可以尽可能地平衡数据加载/聚合和预解析以维护查询性能 DBMS_AW包有两个存储过程是可以帮助你优化这个聚合过程的,它们能够确认一个维度中消耗最多的成员。这两个包是:

    · ADVISE_CUBE

    · ADVISE_REL

    它们都使你可以定义一个百分值来进行预先计算,这作为形成常规建立过程的一部分。在11g中,这直接包括进AWM中,但是对于那些使用10g的客户,这有一个关于怎样使用这些存储过程的快速概括。

    Advise_Cube

    ADVISE_CUBE 存储过程帮助你确定怎样在一个分析工作区中预先聚合一个标准格式立方体。这个存储过程有两个参数:

    · Aggmap_name:与这个立方体关联的aggmap的名称。

    · Precompute_percentage:要进行预先聚合的立方体数据的百分比。默认是20%。

    在aggmap中的每一个RELATION语句都必须有一个预先计算的条件语句,它包含一个valueset(数据集)。假如这个valueset不为空,那么ADVISE_CUBE在添加新的值前会删除它的内容。

    这个aggmap必须在它的每一个RELATION语句中有一个预先计算的条件子句。预先计算的条件子句必须包含一个valueset。基于你指定的预先计算百分比,ADVISE_CUBE会返回一个在每个valueset中的维度成员集合。

    现在我试着使用这个常规schema并在获取正确结果方面遇到了一些问题。在一个立方体中的每一个测量,都有一个指向AGGMAP对象的规则,如下所示,在这里aggmap是OBJ1123208571:

    DEFINE SALES_PRT_TOPFRML FORMULA DECIMAL

    EQ aggregate(this_aw!SALES_PRT_TOPVAR using this_aw!OBJ1124208571)

    这个aggmap看起来是这样的:

    DEFINE OBJ1124208571 AGGMAP 
    AGGMAP 
    RELATION this_aw!TIME_PARENTREL(this_aw!TIME_AGGRHIER_VSET) PRECOMPUTE(this_aw!TIME_AGGRDIM_VSET) OPERATOR SUM args DIVIDEBYZERO YES DECIMALOVERFLOW YES NASKIP YES COUNT NO 
    RELATION this_aw!CHANNELS_PARENTREL(this_aw!CHANNELS_AGGRHIER_VSET) PRECOMPUTE(this_aw!CHANNELS_AGGRDIM_VSET) OPERATOR SUM args DIVIDEBYZERO YES DECIMALOVERFLOW YES NASKIP YES COUNT NO 
    RELATION this_aw!GEOGRAPHIES_PARENTREL(this_aw!GEOGRAPHIES_AGGRHIER_VSET) PRECOMPUTE(this_aw!GEOGRAPHIES_AGGRDIM_VSET) OPERATOR SUM args DIVIDEBYZERO YES DECIMALOVERFLOW YES NASKIP YES COUNT NO 
    RELATION this_aw!PRODUCTS_PARENTREL(this_aw!PRODUCTS_AGGRHIER_VSET) PRECOMPUTE(this_aw!PRODUCTS_AGGRDIM_VSET) OPERATOR SUM args DIVIDEBYZERO YES DECIMALOVERFLOW YES NASKIP YES COUNT NO 
    MODEL this_aw!SALES_OBJ1124208571_TIME_AWXMLMODEL PRECOMPUTE(NA) 
    MODEL this_aw!SALES_OBJ1124208571_CHANNELS_AWXMLMODEL PRECOMPUTE(NA) 
    MODEL this_aw!SALES_OBJ1124208571_GEOGRAPHIES_AWXMLMODEL PRECOMPUTE(NA) 
    MODEL this_aw!SALES_OBJ1124208571_PRODUCTS_AWXMLMODEL PRECOMPUTE(NA) 
    AGGINDEX NO 
    CACHE SESSION 
    END 
    

    在这篇文档中,这个示例显示了一个更为简单的AGGMAP,如下所示:

    DEFINE UNITS_AGG AGGMAP

    我不确定在计算一个维度中指定成员的成本时这个是怎么工作的。对另一个包Advise_Rel清楚些。

    Advise_Rel

    ADIVISE_REL过程是对一个指定的维度起作用,并可以使用标准格式aggmap涉及的现有valuesets。这个存储过程有三个参数:

    · Family_relation_name:家族关系的名称,它指定一个维度和维度成员间的层级关系。

    · Valueset_name:一个valueset的名称,它包含了这个过程的结果。这个valueset必须是从家族关系中的维度定义的。假如这个valueset不为空,那么ADVISE_REL会在添加新值之前删除它的内容。

    · Precompute_percentage:这个维度预先聚合的百分比。默认是20%。

    这个valueset必须是基于要分析的维度的,而且在这种情况下这个valueset可以列在标准格式aggmap中。基于你指定的预先计算百分比,ADVISE_REL会返回维度成员的集合到指定的valueset中。预先计算的值是基于探索父成员的成本而选择的。一个父成员具有的子成员越多,那么它在查询时计算所花费的时间就越长。

    这是用来执行这个过程的脚本:

    SET SERVEROUTPUT ON 
    spool advise_dims.log 
    EXEC dbms_aw.execute('aw attach SH_AW rw'); 
    EXEC dbms_aw.advise_rel('PRODUCT_PARENTREL', 'PRODUCT_AGGRDIM_VSET', 25); 
    EXEC dbms_aw.advise_rel('CHANNELS_PARENTREL', 'CHANNELS_AGGRDIM_VSET', 25); 
    EXEC dbms_aw.advise_rel('GEOGRAPHIES_PARENTREL', 'GEOGRAPHIES_AGGRDIM_VSET', 25); 
    EXEC dbms_aw.advise_rel('TIME_PARENTREL', 'TIME_AGGRDIM_VSET', 25); 
    EXEC dbms_aw.execute('show values(PRODUCTS_AGGRDIM_VSET)'); 
    EXEC dbms_aw.execute('show values(GEOGRAPHIES_AGGRDIM_VSET)'); 
    EXEC dbms_aw.execute('show values(CHANNELS_AGGRDIM_VSET)'); 
    EXEC dbms_aw.execute('show values(TIME_AGGRDIM_VSET)'); 
    execute dbms_aw.execute('update;commit;aw detach SH_AW'); 
    spool off 
    exit 
    

    最后一步是加载数据到立方体中,现在这个聚合引擎会使用这些值来预先计算指定的成员。

    DBMS_AW 包有两个很有趣也很有用的存储过程,它们使你可以调整你的聚合过程。在OLAP项目中一个常见的问题是预先计算哪些等级以及在查询时计算哪些等级 大多数人们似乎认为你必须预先计算他们维度的所有等级。不过这个方法的缺点是数据加载和聚合过程会比你所期望的时间更长。那么是否可以尽可能地平衡数据加载/聚合和预解析以维护查询性能 DBMS_AW包有两个存储过程是可以帮助你优化这个聚合过程的,它们能够确认一个维度中消耗最多的成员。这两个包是:

    · ADVISE_CUBE

    · ADVISE_REL

    它们都使你可以定义一个百分值来进行预先计算,这作为形成常规建立过程的一部分。在11g中,这直接包括进AWM中,但是对于那些使用10g的客户,这有一个关于怎样使用这些存储过程的快速概括。

    Advise_Cube

    ADVISE_CUBE 存储过程帮助你确定怎样在一个分析工作区中预先聚合一个标准格式立方体。这个存储过程有两个参数:

    · Aggmap_name:与这个立方体关联的aggmap的名称。

    · Precompute_percentage:要进行预先聚合的立方体数据的百分比。默认是20%。

    在aggmap中的每一个RELATION语句都必须有一个预先计算的条件语句,它包含一个valueset(数据集)。假如这个valueset不为空,那么ADVISE_CUBE在添加新的值前会删除它的内容。

    这个aggmap必须在它的每一个RELATION语句中有一个预先计算的条件子句。预先计算的条件子句必须包含一个valueset。基于你指定的预先计算百分比,ADVISE_CUBE会返回一个在每个valueset中的维度成员集合。

    现在我试着使用这个常规schema并在获取正确结果方面遇到了一些问题。在一个立方体中的每一个测量,都有一个指向AGGMAP对象的规则,如下所示,在这里aggmap是OBJ1123208571:

    DEFINE SALES_PRT_TOPFRML FORMULA DECIMAL

    EQ aggregate(this_aw!SALES_PRT_TOPVAR using this_aw!OBJ1124208571)

    这个aggmap看起来是这样的:

    DEFINE OBJ1124208571 AGGMAP 
    AGGMAP 
    RELATION this_aw!TIME_PARENTREL(this_aw!TIME_AGGRHIER_VSET) PRECOMPUTE(this_aw!TIME_AGGRDIM_VSET) OPERATOR SUM args DIVIDEBYZERO YES DECIMALOVERFLOW YES NASKIP YES COUNT NO 
    RELATION this_aw!CHANNELS_PARENTREL(this_aw!CHANNELS_AGGRHIER_VSET) PRECOMPUTE(this_aw!CHANNELS_AGGRDIM_VSET) OPERATOR SUM args DIVIDEBYZERO YES DECIMALOVERFLOW YES NASKIP YES COUNT NO 
    RELATION this_aw!GEOGRAPHIES_PARENTREL(this_aw!GEOGRAPHIES_AGGRHIER_VSET) PRECOMPUTE(this_aw!GEOGRAPHIES_AGGRDIM_VSET) OPERATOR SUM args DIVIDEBYZERO YES DECIMALOVERFLOW YES NASKIP YES COUNT NO 
    RELATION this_aw!PRODUCTS_PARENTREL(this_aw!PRODUCTS_AGGRHIER_VSET) PRECOMPUTE(this_aw!PRODUCTS_AGGRDIM_VSET) OPERATOR SUM args DIVIDEBYZERO YES DECIMALOVERFLOW YES NASKIP YES COUNT NO 
    MODEL this_aw!SALES_OBJ1124208571_TIME_AWXMLMODEL PRECOMPUTE(NA) 
    MODEL this_aw!SALES_OBJ1124208571_CHANNELS_AWXMLMODEL PRECOMPUTE(NA) 
    MODEL this_aw!SALES_OBJ1124208571_GEOGRAPHIES_AWXMLMODEL PRECOMPUTE(NA) 
    MODEL this_aw!SALES_OBJ1124208571_PRODUCTS_AWXMLMODEL PRECOMPUTE(NA) 
    AGGINDEX NO 
    CACHE SESSION 
    END 
    

    在这篇文档中,这个示例显示了一个更为简单的AGGMAP,如下所示:

    DEFINE UNITS_AGG AGGMAP

    我不确定在计算一个维度中指定成员的成本时这个是怎么工作的。对另一个包Advise_Rel清楚些。

    Advise_Rel

    ADIVISE_REL过程是对一个指定的维度起作用,并可以使用标准格式aggmap涉及的现有valuesets。这个存储过程有三个参数:

    · Family_relation_name:家族关系的名称,它指定一个维度和维度成员间的层级关系。

    · Valueset_name:一个valueset的名称,它包含了这个过程的结果。这个valueset必须是从家族关系中的维度定义的。假如这个valueset不为空,那么ADVISE_REL会在添加新值之前删除它的内容。

    · Precompute_percentage:这个维度预先聚合的百分比。默认是20%。

    这个valueset必须是基于要分析的维度的,而且在这种情况下这个valueset可以列在标准格式aggmap中。基于你指定的预先计算百分比,ADVISE_REL会返回维度成员的集合到指定的valueset中。预先计算的值是基于探索父成员的成本而选择的。一个父成员具有的子成员越多,那么它在查询时计算所花费的时间就越长。

    这是用来执行这个过程的脚本:

    SET SERVEROUTPUT ON 
    spool advise_dims.log 
    EXEC dbms_aw.execute('aw attach SH_AW rw'); 
    EXEC dbms_aw.advise_rel('PRODUCT_PARENTREL', 'PRODUCT_AGGRDIM_VSET', 25); 
    EXEC dbms_aw.advise_rel('CHANNELS_PARENTREL', 'CHANNELS_AGGRDIM_VSET', 25); 
    EXEC dbms_aw.advise_rel('GEOGRAPHIES_PARENTREL', 'GEOGRAPHIES_AGGRDIM_VSET', 25); 
    EXEC dbms_aw.advise_rel('TIME_PARENTREL', 'TIME_AGGRDIM_VSET', 25); 
    EXEC dbms_aw.execute('show values(PRODUCTS_AGGRDIM_VSET)'); 
    EXEC dbms_aw.execute('show values(GEOGRAPHIES_AGGRDIM_VSET)'); 
    EXEC dbms_aw.execute('show values(CHANNELS_AGGRDIM_VSET)'); 
    EXEC dbms_aw.execute('show values(TIME_AGGRDIM_VSET)'); 
    execute dbms_aw.execute('update;commit;aw detach SH_AW'); 
    spool off 
    exit 
    

    最后一步是加载数据到立方体中,现在这个聚合引擎会使用这些值来预先计算指定的成员。

    上一篇返回首页 下一篇

    声明: 此文观点不代表本站立场;转载务必保留本文链接;版权疑问请联系我们。

    别人在看

    正版 Windows 11产品密钥怎么查找/查看?

    还有3个月,微软将停止 Windows 10 的更新

    Windows 10 终止支持后,企业为何要立即升级?

    Windows 10 将于 2025年10 月终止技术支持,建议迁移到 Windows 11

    Windows 12 发布推迟,微软正全力筹备Windows 11 25H2更新

    Linux 退出 mail的命令是什么

    Linux 提醒 No space left on device,但我的空间看起来还有不少空余呢

    hiberfil.sys文件可以删除吗?了解该文件并手把手教你删除C盘的hiberfil.sys文件

    Window 10和 Windows 11哪个好?答案是:看你自己的需求

    盗版软件成公司里的“隐形炸弹”?老板们的“法务噩梦” 有救了!

    IT头条

    公安部:我国在售汽车搭载的“智驾”系统都不具备“自动驾驶”功能

    02:03

    液冷服务器概念股走强,博汇、润泽等液冷概念股票大涨

    01:17

    亚太地区的 AI 驱动型医疗保健:2025 年及以后的下一步是什么?

    16:30

    智能手机市场风云:iPhone领跑销量榜,华为缺席引争议

    15:43

    大数据算法和“老师傅”经验叠加 智慧化收储粮食尽显“科技范”

    15:17

    技术热点

    SQL汉字转换为拼音的函数

    windows 7系统无法运行Photoshop CS3的解决方法

    巧用MySQL加密函数对Web网站敏感数据进行保护

    MySQL基础知识简介

    Windows7和WinXP下如何实现不输密码自动登录系统的设置方法介绍

    windows 7系统ip地址冲突怎么办?windows 7系统IP地址冲突问题的

      友情链接:
    • IT采购网
    • 科技号
    • 中国存储网
    • 存储网
    • 半导体联盟
    • 医疗软件网
    • 软件中国
    • ITbrand
    • 采购中国
    • CIO智库
    • 考研题库
    • 法务网
    • AI工具网
    • 电子芯片网
    • 安全库
    • 隐私保护
    • 版权申明
    • 联系我们
    IT技术网 版权所有 © 2020-2025,京ICP备14047533号-20,Power by OK设计网

    在上方输入关键词后,回车键 开始搜索。Esc键 取消该搜索窗口。