锁定老帖子 主题:感慨高价CPU、硬盘和内存
精华帖 (0) :: 良好帖 (0) :: 新手帖 (0) :: 隐藏帖 (14)
|
|
---|---|
作者 | 正文 |
发表时间:2011-12-18
尼玛千万的数据也是数据吗?楼主你好像很抵触别人的意见?那要不就是天气原因影响的?
|
|
返回顶楼 | |
发表时间:2011-12-18
shinkadoki 写道 这种配置,只能换DBA或者程序员了。
确实,我们接的省级银行的项目,数据是楼主的几倍。配置至强四核,内存16G,分给数据库的才8G内存。每天还要跑批,超多的IO操作。才出现楼主说的情况,有些查询要半个小时,也是经常抱内存溢出。 |
|
返回顶楼 | |
发表时间:2011-12-19
前段时间我通过dblink统计某省一个月某话单表的量,大概有3亿,我的数据库配置低,没太多内存做回滚,花费时间很长,偶尔还报内存不足。
后来把方法改了改,换做按天count,然后累计,结果很快就能出来了。 大数据量的处理,建议还是用分治法,换种角度考虑。 |
|
返回顶楼 | |
发表时间:2011-12-19
真不敢相信,国内如此的级别的企业所有东西都倚仗与数据库!
|
|
返回顶楼 | |
发表时间:2011-12-19
“如select count...,经常让我等上10多分钟,甚至几个小时,数据量才千万级。 ”
你们的数据存储结果没有基本的优化? |
|
返回顶楼 | |
发表时间:2011-12-19
yangguo 写道 射得快怪人家洞太紧。
87v51b |
|
返回顶楼 | |
发表时间:2011-12-19
好吧,叔词穷了。。。
|
|
返回顶楼 | |
发表时间:2011-12-19
虽然已经转行不做软件,还是忍不住出来喷lz一句。 你这里的问题绝对是软件程序或者配置的问题。 千万级别? 这个数量级真的不高。 给lz举个例子,我07年参与开发的一个项目,是出租车运行信息管理。 我们做的只是查询一部分。 之前的一期做的是数据生成,由出租车搭载的gps自动反馈信息,行驶距离,行驶时间等等。 这个是上万辆出租车同时统计 说句不好听的,每天产生的数据量就是上亿。 我们项目组缺钱,开发用的服务器仅仅是一台好点的普通服务器,双至强cpu,8G内存,300G硬盘。数据是从客户那里弄到的8000万条,我们在这个基础上开发。我当时开发的是出租车行驶率什么的 现在有点忘了。 就这台破服务器,我们十几个人开发,8000万数据的统计也只有十几秒钟。
后来做银行业务,TB级的数据量比比皆是。 建议lz联系服务器管理员,查看一下运行缓慢的时候cpu以及io工作量。确定出问题的地方。 |
|
返回顶楼 | |
发表时间:2011-12-19
05年试过IBM的小型机跑下测试,在上海的IBM一个部门里,websphere安装个应用,两小时,机器有点毛病,重启下机器是好象是三四个小时,直接告诉我们第二天再来。我见过最慢的机器,不过人家有个称号是不死机,这机器还真不能死,死了不是一时半会儿开得起来的。
|
|
返回顶楼 | |
发表时间:2011-12-19
我做过的两个项目,数据都是上亿的,服务器具体配置不明,不过都是2005年前买的,肯定没LZ好,我觉得你骂错了机器了……多找找软件的问题吧。
|
|
返回顶楼 | |