这边系统大致情况:
外业人员每人一个手持终端,大约在线同时有200多号人,然后每一个终端隔一段时间就给服务端发送当前位置数据。每日数据量大概有30w条数据。
现在做法数据全部插入到了一张表中,造成这个表数据量很大,目前这边做法这个表只保留一个季度的数据,别的备份到备份表中。但是还是不能解决问题,当这个表有几千万条数据时,做统计分析功能很慢,因为还要关联别的表,group这种常用。
我的一点思路,服务端首先过滤下终端提交上来的数据,当提交的数据在一个容差范围内,过滤这种无用的数据,还有就是在服务端做一点缓冲,当够n条时再请求数据库向数据库提交,目前做法是来一条就数据库提交一条。
关于存这个大量点的表如何来拆分,处理很让人头疼。而客户需要的报表统计分析功能又复杂。大家帮忙出出主意。
分享到:
相关推荐
竞价数据每日报表-竞价常用数据报表-竞价统计分析报表.docx竞价数据每日报表-竞价常用数据报表-竞价统计分析报表.docx竞价数据每日报表-竞价常用数据报表-竞价统计分析报表.docx竞价数据每日报表-竞价常用数据报表-...
数据可视化报表系统源码,一款数据可视化报表系统,含报表和大屏设计,像搭建积木一样在线设计报表!功能涵盖,数据报表、打印设计、图表报表、大屏设计等! Web 版报表设计器,类似于excel操作风格,通过拖拽完成...
该系统为报表数据的收集、整理、分析工作设置了大量功能,根据用户在数据收集处理工作中的不同作用,用户大体可以划分为三类,且各类用户使用分户系统的功能有所不同,下面分别介绍这三类用户的工作流程:
型统计报表处理系统的设计原理及实现方法。开发完成的 “通用统计报表处理系统”以一种“通用”的观点解决了应用 系统的输出问题, 其本身既是一个通用统计管理系统, 又可 以作为其它应用系统的输出工具, 为其他应用...
企业在报表申报系统中进行在线或离线电子数据填报和数据审核,并通过申报系统将报表数据申报到统计局,统计局通过数据征管信息系统对企业申报数据进行整理、统计和分析并统一管理,并将分析处理后的数据提供给统计局...
网站数据统计分析报表(包含cnzz站长、百度搜索推广、百度网盟推广、商务通数据统计分析) 数据统计模板.xlsx
网站数据统计分析报表(包含cnzz站长、百度搜索推广、百度网盟推广、商务通数据统计分析).docx网站数据统计分析报表(包含cnzz站长、百度搜索推广、百度网盟推广、商务通数据统计分析).docx网站数据统计分析报表(包含...
ERP CSharp C# 报表 C# 打印 excel c# C# erp 报表设计 Excel的操作,其中可以读取及写入Excel 文件
利用FineBI基于Hadoop和Hive实现聊天数据统计分析,构建聊天数据分析报表。
企业数据统计分析报表详细记录了每个分析报表的属性及含义,可以有效快速的查看统计报表内容及分析项。
通用统计报表数据处理软件SARP2000 V30开发与使用.doc
客户端报表的统计分析.doc
人力资源统计报表数据处理系统样本.doc
人事统计报表数据处理系统.pptx
以图表形式展现的“调度系统业务统计”业务需求(系统名称暂定为:车辆调度业务统计分析系统),涉及到多个不同类型的数据源:Oracle、SQL Server,需要采用数据异构、数据挖掘技术设计开发,包括如下过程: 1) 数据...
人力资源统计报表数据处理系统.doc
该报表系统能够读取WINCC中历史归档数据,产生出EXCEL报表文件,同时在画面中EXCEL控件实时显示。 该报表系统有如下优点: 1、 该报表系统具备日报表、月报表、年报表、自由报表(任意时间段)功能。 2、 报表读取的...
信息化资产管理系统统计分析报表参照.pdf
人事统计报表数据处理系统介绍.pptx
人事统计报表数据处理系统PowerPointPres.pptx