2 csx13dn csx13dn 于 2014.03.02 09:41 提问

sqlserver 大数据量数据库设计问题请教
小弟不才,第一次接大数据量项目,其中一个主要表用于存储采集数据(每秒一条数据,共5个采集点)数据量如下:

数据量估算(按秒):
采集点       1           5
一天数据    86400           432000
十天数据    864000          4320000
一个月数据 2592000         12960000
一年数据    31536000    157680000

我原先的设计就是很简单,按照上面数据估算,5个采集点,建立5个对应的表,然后每十天(也就是旬)创建一个历史表保存数据。
但是,头疼的问题来了,这样建表对跨旬查询、月报表、年报表太痛苦,所有,想在此求助下有经验的前辈,对数据库设计方面不吝给些意见。
Csdn user default icon
上传中...
上传图片
插入图片
准确详细的回答,更有利于被提问者采纳,从而获得C币。复制、灌水、广告等回答会被删除,是时候展现真正的技术了!
其他相关推荐
大数据量+高并发的数据库SQL优化
大数据量+高并发的数据库SQL优化
关于大数据量的数据库设计问题
看到很好的一个帖子,分享下。   关于大数据量的数据库设计问题 从全国的2万个网点汇总数据到中央数据库,每天数据总量大约100亿条左右,每调数据大约为2K。  数据库打算用oracle,要考虑到以后的报表和查询问题,数据库服务器如何设计,数据库如何设计,表如何设计,是要一个网点一个表设计比较好,还是每天一个表好?是否要用到RAC?请各位高手指点。 从时间上计算:1000000万/2万=5
SQL Server大数据量插入
SQL Server大数据插入方法比较多,下面我们先谈谈Bulk insert 方法。 首先,我们创建一张TABLE,如下面T-SQL脚本:  create table TestTable2   (id int,   amount int check(amount >=1000 and amount<=5000)) 假设有这样的文本数据 testdata.txt:
数据库大数据量处理问题讨论
一、我从事过6年的数据库高负载解决方案,处理过很多的海量数据问题。我的经验是:  1。优化数据存储的算法,保证io的读写最小,这一点最容易被人忽视,而这一点确实整个问题的关键。  2。确保可读数据在磁盘上连续存储,使得磁盘指针不会“空转”。 二、实现读写分离是一种方法,不足的是这样还是没有解决表数据量大,使查询运算耗时的问题. 三、 我这边的mysql也到了单表到2G快了
SQL Server DBA调优日记(一)——大数据量查询记录数优化及原理探讨
SQL Server DBA调优日记第一篇,大数据量查询记录数优化及原理探讨。现象、解决、模拟、原理探讨。
大数据量高效导入数据库(以excel导入sqlserver为例)
最近正在做一个项目,要把excel中的数据导入到sqlserver数据库中,首先想到的就是insert,采用连接Excel对象的Microsoft.ACE.OLEDB.12.0接口引擎连接到excel,然后读取到DataTable中然后每次读取一个Row,insert到数据库表里,但是效率低的让人可怕,一旦数据量过大,卡的要死,我们测试数据是有24万条,文件大小14,249,487 字节(大概14MB),后来经过一番研究发现了SqlBulkCopy,至于SqlBulkCopy的详细介绍就不说了,都是文字描述
大数据sqlserver数据库表数据迁移
今天真汗颜啊。。。。由于我的一不小心,我把几百万条数据给删了,囧。客户的几年重要数据就这样没了,我当时愁的,还好后来找回来了。对于大数据的操作,大家一定要慎重操作。    在SQLServer2005中,想从一个数据库服务器迁移一个数据表的数据到另一数据库服务器的表中,大家一般会怎么做呢?    我先来说说我今天的做法:(因为自己的笔记本上没有装软件,不能截图给大家看了,大家可以自己动手操作下) ...
MySQL,SQLSERVER 大数据量导入
完全借鉴:SQLSERVER:https://www.cnblogs.com/newsouls/archive/2012/09/10/BulkInsert.htmlMYSQL : https://www.cnblogs.com/waynechou/p/7794939.html速度超级快,感谢
SQL 大数据查询如何进行优化?sqlserver和oracle整理
六十多条大数据优化建议。涉及到sqlserver和oracle的SQL语句。
大数据量下的SQL Server数据库自身优化
原文: http://www.d1net.com/bigdata/news/284983.html 1.1:增加次数据文件          从SQL SERVER 2005开始,数据库不默认生成NDF数据文件,一般情况下有一个主数据文件(MDF)就够了,但是有些大型的数据库,由于信息很多,而且查询频繁,所以为了提高查询速度,可以把一些表或者一些表中的部分记录分开存储在不同的数据文件里