cube 问题 请进来帮忙解决

xiaoerp

1，目前公司的数据量越来越来，其中有两个CUBE特别大，数据量应该达到1亿的级别。而其每月以300w条记录的速度增长。然而，公司要求对这两个cube每月月末跑全量。目前这两个大CUBE是并行，但是效率实在是慢，要跑接近10个小时。大家有什么好的优化方案吗？
2，设计cube的时候，是不是只能对日期维度做分组才能生成一个ctrol cube和vcd文件？其他的维度是不是就不可以了？
3，目前公司只有一台cognos服务器，最大负载是可以支持多少的用户并发查询？因为目前经常报错：cognos服务不可用，但是重新启动就可以用了。我严重怀疑是负载过大引起。正好公司有台备机，想做个负载均衡，但不知道怎么搭建，怎么同步备份？

xiaoerp

第一：你们的数据量太大了，建议在ETL中做优化，从后台处理玩这些数据之后再形成cube这样会更快些，例如，需要计算的不建议用Cognos进行计算，直接从后台计算好就行。
第二：这个问题目前我们只是用过时间维度作为cube分组，其他维度没试过。不过你可以将一个大的cube分为己个小cube来做。这样会更好一些。
第三：我们是50个用户并发的，不知道你们有多少用户并发使用。当时你们上Cognos的时候他们给你们的建议是多少用户数的。做集群我也不是很清楚。

xiaoerp

我的实际经验告诉我
问题一，主要的耗时应该在cube的抽数这块，会用掉50%的总时间，所以建议从这方面优化，可以考虑换台性能好一些的ETL服务器，这样I/O也会好些。还有，在跑cube的同时，ETL服务器不要做其他的批处理，减少I/O
问题三，如果做了cognos集群的话，我们的情况就是，用户并发200，没有问题

xiaoerp

对于第一个问题，根据经验
1.需定期重构立方体，这样有助于提高刷新效率。
2.优化ETL，复杂计算尽量在数据仓库完成。
3.换台性能高的机器或者像楼上所说，刷新立方体时尽量减少IO
对于第二个问题，不管采取什么维度分区，只要是分区，都可以生成VCD文件、CTROL CUBE和子CUBE文件夹。