关于大量数据存储的数据库设计
时间:2011-07-11
来源:互联网
向大家请教一个问题
我们公司从一个数据提供商购买了数据,我们需要把这些数据保存到数据库用于模拟。这些数据是不同产品的交易信息,所以我们可以按照不同的时间段,不同的产品下载数据,而且这些数据是保存在csv文件里。
现在的问题是,这些数据量特别的大,即便是一个产品一天的数据量就有几十万条,而我们要存储5年大概10几个产品的交易信息,所以数据量会非常的庞大(大概有几十个G)。
我以前没有做过这么大数据量的数据库设计,所以想请教一下大家,帮我看看我的设计是否有问题,如果有问题,请赐教。
我的做法:
把一个产品一个月的信息存储在一个表里面,这样一个表存储大概几千万条数据,然后把表进行分区处理。
还请教一个问题:如果数据量超过几十个G,是否可以用mysql来存储(我们以前的数据是存在mysql里面的),如果购买正版的oralce或者sql server,价格会非常的贵,而如果我们使用oralce,我们必须要购买正版。当然公司也不缺这点钱,我只是觉得能省则省。
希望大家能够给出一些建议和意见,谢谢大家。
我们公司从一个数据提供商购买了数据,我们需要把这些数据保存到数据库用于模拟。这些数据是不同产品的交易信息,所以我们可以按照不同的时间段,不同的产品下载数据,而且这些数据是保存在csv文件里。
现在的问题是,这些数据量特别的大,即便是一个产品一天的数据量就有几十万条,而我们要存储5年大概10几个产品的交易信息,所以数据量会非常的庞大(大概有几十个G)。
我以前没有做过这么大数据量的数据库设计,所以想请教一下大家,帮我看看我的设计是否有问题,如果有问题,请赐教。
我的做法:
把一个产品一个月的信息存储在一个表里面,这样一个表存储大概几千万条数据,然后把表进行分区处理。
还请教一个问题:如果数据量超过几十个G,是否可以用mysql来存储(我们以前的数据是存在mysql里面的),如果购买正版的oralce或者sql server,价格会非常的贵,而如果我们使用oralce,我们必须要购买正版。当然公司也不缺这点钱,我只是觉得能省则省。
希望大家能够给出一些建议和意见,谢谢大家。
作者: beiyeqingteng 发布时间: 2011-07-11
MYSQL可以存储几十个G,前提是你的操作系统支持。
作者: ACMAIN_CHM 发布时间: 2011-07-11
引用 1 楼 acmain_chm 的回复:
MYSQL可以存储几十个G,前提是你的操作系统支持。
MYSQL可以存储几十个G,前提是你的操作系统支持。
请问哪些操作系统可以支持?谢谢。
作者: beiyeqingteng 发布时间: 2011-07-11
相关阅读 更多
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读:74
-
如何安装mysql8.0
阅读:31
-
Word快速设置标题样式步骤详解
阅读:28
-
20+道必知必会的Vue面试题(附答案解析)
阅读:37
-
HTML如何制作表单
阅读:22
-
百词斩可以改天数吗?当然可以,4个步骤轻松修改天数!
阅读:31
-
ET文件格式和XLS格式文件之间如何转化?
阅读:24
-
react和vue的区别及优缺点是什么
阅读:121
-
支付宝人脸识别如何关闭?
阅读:21
-
腾讯微云怎么修改照片或视频备份路径?
阅读:28