求解决方案
时间:2011-12-28
来源:互联网
公司正在做的一个项目
将来数据量可能非常大
客户端每请求一次,就会有一条记录,日数据估计几千万,甚至上亿,字段大约10来个,里面的数据会按各种条件进行汇总
自己想到下面3个方法
1.每天自动创建一个表存储当天的数据,时时汇总,半夜就把数据移到另一个服务器的历史数据库
2.按小时创建24张表,自动汇总前一个小时的数据,然后移动到历史数据库,然后清除数据。
3.使用SQL2008的分区功能,貌似要多个硬盘才能体现性能
24张表分散了数据,应该性能最好,单表2-3000W的数据,速度应该还行
求方案,谢谢!
将来数据量可能非常大
客户端每请求一次,就会有一条记录,日数据估计几千万,甚至上亿,字段大约10来个,里面的数据会按各种条件进行汇总
自己想到下面3个方法
1.每天自动创建一个表存储当天的数据,时时汇总,半夜就把数据移到另一个服务器的历史数据库
2.按小时创建24张表,自动汇总前一个小时的数据,然后移动到历史数据库,然后清除数据。
3.使用SQL2008的分区功能,貌似要多个硬盘才能体现性能
24张表分散了数据,应该性能最好,单表2-3000W的数据,速度应该还行
求方案,谢谢!
作者: noyester 发布时间: 2011-12-28
原始记录做一个分区表.
汇总的数据每天计算到另一个结果的表.
查的时候直接查这个结果表就可以了
汇总的数据每天计算到另一个结果的表.
查的时候直接查这个结果表就可以了
作者: kingtiy 发布时间: 2011-12-28
楼主已经考虑得很全面了,这么大的数据量,估计要用存储了吧?
普通服务器估计存不下来,而且备份恢复是个问题,如何确保高可用性需考虑喔.
普通服务器估计存不下来,而且备份恢复是个问题,如何确保高可用性需考虑喔.
作者: ap0405140 发布时间: 2011-12-28
相关阅读 更多
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读:74
-
如何安装mysql8.0
阅读:31
-
Word快速设置标题样式步骤详解
阅读:28
-
20+道必知必会的Vue面试题(附答案解析)
阅读:37
-
HTML如何制作表单
阅读:22
-
百词斩可以改天数吗?当然可以,4个步骤轻松修改天数!
阅读:31
-
ET文件格式和XLS格式文件之间如何转化?
阅读:24
-
react和vue的区别及优缺点是什么
阅读:121
-
支付宝人脸识别如何关闭?
阅读:21
-
腾讯微云怎么修改照片或视频备份路径?
阅读:28