壹佰网|ERP100 - 企业信息化知识门户

 找回密码
 注册

QQ登录

只需一步,快速开始

查看: 551|回复: 0

Cube刷新时,如何提高读取数据速度

[复制链接]
发表于 2012/3/21 00:48:45 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。如果您注册时有任何问题请联系客服QQ: 83569622  。

您需要 登录 才可以下载或查看,没有帐号?注册

x
Cube刷新时,如何提高读取数据的速度(Packaging数据源)?

在我的案例中,目前Cube刷新时,读取数据很慢,一个月1千万左右的数据源,增量刷新时,要花35分钟在读取数据源,请问各位可以怎么优化?或者谁有好的Case,请给我建议,谢谢!

在我的案例中,增量刷新规则,按时间维度分割,每月采用增量刷新的模型。

另外一个问题,千万级的数据源,TF是否可以在半小时内刷新完?
open data source花了35分钟,显然是有优化空间的
最好的方法是在数据库设计的时候建一层增量数据表,增量刷新时直接全表扫描增量表的数据,在数据量大的时候用高吞吐的全表扫描最快;
其次可以使用按照月份进行分区的分区表,把每月新增的数据单独放在一个分区内,这样也可以全表扫描该分区,效果也不错。
您需要登录后才可以回帖 登录 | 注册

本版积分规则

QQ|Archiver|小黑屋|手机版|壹佰网 ERP100 ( 京ICP备19053597号-2 )

Copyright © 2005-2012 北京海之大网络技术有限责任公司 服务器托管由互联互通
手机:13911575376
网站技术点击发送消息给对方83569622   广告&合作 点击发送消息给对方27675401   点击发送消息给对方634043306   咨询及人才点击发送消息给对方138011526

GMT+8, 2025/11/29 15:09 , Processed in 0.015990 second(s), 14 queries , File On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表