`

设计数据量大的表

阅读更多

当设计数据量大的表时,需要考虑多一点

一 可以使用表分区

  表分区有以下优点:
1、改善查询性能:对分区对象的查询可以仅搜索自己关心的分区,提高检索速度。
2、增强可用性:如果表的某个分区出现故障,表在其他分区的数据仍然可用;
3、维护方便:如果表的某个分区出现故障,需要修复数据,只修复该分区即可;
4、均衡I/O:可以把不同的分区映射到磁盘以平衡I/O,改善整个系统性能。

二 在大表上加少数索引(或者不加索引) ,每天或者每周将统计数据放到中间表 ,查询的时候直接从中间表里查询 ,这样做一定要确定历史的数据不可以改变 ,要不然 ,会出现数据不一致 ,将数据插到中间表可以在job中做;

 

 

分享到:
评论

相关推荐

    数据量大的设计.docx

    数据量大的设计方案,同时有A、B、C表,而且A、B、C数据量巨大、插入、更新频率高

    大数据量的系统的数据库结构如何设计

    大数据量的系统的数据库结构如何设计,经验之谈啊

    mysql数据库大数据量导入导出多种方法

    mysql数据库大数据量导入导出多种方法,该文档详述SELECT * INTO和mysqldump导出方法。导入方法中包括导入sql,txt文件和load data三种方法

    电力行业量测数据归集专项模型及标准表设计成果-v1.2-.xlsx

    电力行业量测数据归集专项模型及标准表设计成果

    大数据量Excel 数据导入系统的设计与实现 (2014年)

    针对现有大数据量Excel导入系统效率较低的问题,设计并实现了一种新的大数据量Excel数据导入系统。该系统采用C#语言,在VS2012的开发环境中,利用多线程技术将大数据量Excel表格数据导入到SQL Server中,加快了信息...

    大数据仓库与大数据挖掘课程设计.doc

    绪论 2 1.1项目背景 2 1.2 提出问题 2 2 数据库仓库与数据集的概念介绍 2 2.1数据仓库 2 2.2数据集 2 3 数据仓库 3 3.1 数据仓库的设计 3 3.1.1数据仓库的概念模型设计 3 3.1.2数据仓库的逻辑模型设计 3 3.2 数据...

    SQLServer2005大数据量数据存储设计思路分享

    应用场景:一张日志表,记录每天150w左右的数据量,应用要求存储6个月以上,则共计27000w左右的数据规模,表从设计初期就考虑到数据增长会很快,所以采用的是日志表的形似记录的内容,前端应用不需和任何表关联,只...

    MySQL大表性能优化方案 和 MySQL高性能表设计规范

    正对mysql,单个表数据量过大的优化方案,与高性能的表设计规范,提供数据库tps。希望对大家有帮助

    数据汇总--对大量数据进行汇总

    在数据处理中经常需要对大量数据进行汇总,将相同关键字记录的某些数据项的值叠加起来,生成一个分类汇总表。 假设某超级市场销售有m种商品(假设商品的编号为1,2,3,┅┅,m),有n台前台收款机(假设收款机的...

    数据仓库设计说明书

    第3章 设计数据仓库 45 3.1 从操作型数据开始 45 3.2 数据/过程模型和体系结构设计环境 49 3.3 数据仓库和数据模型 50 3.3.1 数据模型 52 3.3.2 中间层数据模型 54 3.3.3 物理数据模型 58 3.4 数据模型和反复开发 59...

    大数据量数据整合与查询性能优化

    大数据量数据整合与查询性能优化(DB2V9& AIXV5.3)v1.2 - 副本.pdf

    高并发Oracle数据库系统的架构与设计

    , 全书主要内容从三个维度展开:首先是内部扩展的维度,深入探讨了高效B树索引、高效表设计、查询优化器等数据库架构设计与优化的核心技术,以及高并发Oracle数据库系统架构与设计的方法论和常见的高并发案例;...

    数据结构课程设计图书信息管理系统报告(顺序表)(模板)

    使用顺序表完成的数据结构课设报告 随着计算机的广泛应用,其逐步成为现代化的标志。图书馆在正常运行过程中总是面对大量的读者信息,书籍信息以及两者相互作用产生的借书信息、还书信息。因此需要对读者资源、书籍...

    MYSQL数据库优化与表设计

    MYSQL在大量数据高并发时如果设计不当,由于性能问题,会导致卡顿,时延较大影响,本文介绍MYSQL的一些优化方法和案例,帮助解决并发中遇到的问题。

    数据库与数据表设计.pptx

    说明 在设计数据表时,应在相应字段的说明部分对字段的用处进行相应的说明,以便于在对数据表进行操作,快速了解各字段的用处。 数据库与数据表设计全文共28页,当前为第21页。 Tb_DayWordPad(日常记事表):用于...

    人口信息系统方案设计 数据结构课程设计(含源程序)

    本次设计的难点在于,测试的数据量比较庞大,怎样实现一种快捷准确的方式来实现人口信息的生成,所以得先写程序自动生成随机的10000000个测试数据,每个数据包括姓名、性别、地址、出生日期、工作信息和电话,其中每...

    员工考勤信息管理的设计与实现数据结构课程设计

    要求内存数据用链表组织,数据文件用文本文件,用户界面用字符界面,枚举量用枚举类型表示。至少实现数据记录的增加、修改、删除、查询及相应结果的显示,查询应能按不同数据项进行。 (3)编制好程序后,设计若干...

    大数据量高并发的数据库优化

    有关于对大数据处理操作的几点建议和方法,已经对数据库中表中设计方法的说明和建议

    数据结构课程设计 数据汇总(超市)

    数据结构课程设计 数据汇总(超市) 报告(内有程序)题目内容: 在数据处理中经常需要对大量数据进行汇总,将相同关键字记录的某些数据项的值叠加起来,生成一个分类汇总表。 假设某超级市场销售有m种商品(假设...

Global site tag (gtag.js) - Google Analytics