`

关于高并发,大数据框架的建议

 
阅读更多

摘自CSDN网友的建议

1.数据量比较大的话,建议使用Hadoop,搭建分布式环境HDFS,做数据分片sharding。
2.服务器需要做负载均衡,不然数据量大读写频繁,而且还要做成多节点的,防止当机。
3.服务器建议使用高性能的反向代理服务器:Nginx。
4.数据持久化ORM层也附加缓存技术,建议使用Reids或者Memcahe,建议使用前者,前者数据类型支持的多,且性能各个方面都不错。数据量多数据操作直接落到库上压力大,当使用人较多是并发量大更受不了。
5.建议废弃掉SSH架构,使用轻量级的Spring MVC + Ibatias。

分享到:
评论

相关推荐

    BigCore大数据高并发开发框架net版

    一套开源的服务器集群分布式大数据高并发的快速开发框架,使用mongodb内存数据库,二级缓存技术。

    BigCore大数据高并发开发框架

    一套开源的服务器集群分布式大数据高并发的快速开发框架,使用mongodb内存数据库,二级缓存技术。

    大数据高并发开发框架BigCore

    一套开源的服务器集群分布式大数据高并发的快速开发框架,使用mongodb内存数据库,二级缓存技术。 java 版下载 https://git.oschina.net/bigcore/bigcore

    分布式大数据高并发的web开发框架.pdf

    分布式大数据高并发的web开发框架.pdf

    大数据平台技术框架选型分析

    • 自助BI分析/交互式SQL (Impala)– 准实时的分析作业,高效的数据探索式 分析,高并发的自助BI功能 • 搜索(Cloudera Search) - 快速的跨应用数据搜索能力 • 数据挖掘(Spark Mllib, R, Mahout)- 适合数据...

    SQL Server高并发和大数据存储方案

    这里将告诉您Sqlserver 高并发和大数据存储方案,具体实现方法:  随着用户的日益递增,日活和峰值的暴涨,数据库处理性能面临着巨大的挑战。下面分享下对实际10万+峰值的平台的数据库优化方案。与大家一起讨论,...

    大数据“分布式调度框架”大集合.docx

    大数据"分布式调度框架"大集合 大数据"分布式调度框架"大集合全文共22页,当前为第1页。大数据"分布式调度框架"大集合全文共22页,当前为第1页。大数据"分布式调度框架"大集合 大数据"分布式调度框架"大集合全文共22...

    基于SSM框架实现的高并发商品秒杀系统完整源码+说明(c3p0作为连接池,Redis为缓存实现高并发 ).zip

    【资源说明】 1、该资源内项目代码都是经过测试运行成功,功能正常的...基于SSM框架实现的高并发商品秒杀系统源码+项目说明(c3p0作为连接池,Redis为缓存实现高并发 ,同时通过MySQL优化降低了网络延迟与GC的影响).zip

    Yii2.0打造京东商城平台PHP电商实战Yii2.0视频教程

    教程名称:Yii2.0 打造京东商城平台 PHP电商实战 Yii2.0视频教程 教程内容: 包含了电商的所有...不错的学习YII框架的基础课程,电商系统的结构完整、框架资源太大,传百度网盘了,链接在附件中,有需要的同学自取。

    大数据机器学习框架(弥勒佛)MLF.zip

    现有的机器学习框架/软件包存在几个问题:无法处理大数据:多数Python,Matlab和R写的训练框架适合处理规模小的样本,没有为大数据优化。不容易整合到实际生产系统:standalone的程序无法作为library嵌入到大程序中...

    一个整合SSM框架的高并发和商品秒杀项目,学习目前较流行的Java框架组合实现高并发秒杀API.zip

    软件开发设计:应用软件开发、系统...云计算与大数据:包括云计算平台、大数据分析、人工智能、机器学习等,云计算是一种基于互联网的计算方式,通过这种方式,共享的软硬件资源和信息可以按需提供给计算机和其他设备。

    一个整合SSM框架的高并发和商品秒杀项目,学习目前较流行的Java框架组合实现高并发秒杀API.zip

    软件开发设计:应用软件开发、系统...云计算与大数据:包括云计算平台、大数据分析、人工智能、机器学习等,云计算是一种基于互联网的计算方式,通过这种方式,共享的软硬件资源和信息可以按需提供给计算机和其他设备。

    基于C++14和ASIO实现高并发TCP网络框架.zip

    包含前端、后端、移动开发、操作系统、人工智能、物联网、信息化管理、数据库、硬件开发、大数据、课程资源、音视频、网站开发等各种技术项目的源码。 包括STM32、ESP8266、PHP、QT、Linux、iOS、C++、Java、python...

    saas 开源开发框架

    tosaas 开发框架是一款通用的 saas 开发框架,能快速的将传统单企业应用转化成saas多租户模式,支持大数据存储高并发访问,支持无限水平扩展存储服务器、应用服务器数量,经受过百万级用户的实际应用考验。

    大数据技术初探.docx

    大数据技术初探 作者:谭琳 来源:《科技创新导报》 2014年第4期 谭琳 (省军区信息化处 山东济南 250099) 摘要:大数据是继物联网、云计算技术后世界又一热议的信息技术,这种密集型数据爆炸现象的出现,标志着...

    SaaS模式下大数据量统计框架的研究和实现

    与传统软件相比, 在软件即为服务( SaaS) 模式下做大数据量统计需要应对海量数据和高并发 处理问题。...表明设计的框架能处理SaaS 模式下的海量数据和高并发, 并能高效地实现统计数据的实时计算查询。

    JAVA面试核心知识点整理283页-2020.pdf.zip

    网络有协议,java 高并发io框架netty。数据结构包括堆栈,队列,链表,二叉树,红黑树,算法包括各种排序,贪心算法,动态规划。以及进阶的分布式,大数据,机器学习,内容非常全,精心总结的。

    .Net Core快速开发框架源码

    Net Core快速开发平台源码 3.4.1...源码里面做了性能优化和高并发处理,对大数据请求及吞吐有很大的借鉴价值; 数据库SqlServer2012 或者 mysql均可 开发工具.Net开发工具需要满足VS2019版本以上 前端开发工具 VS code

    基于SSM+mysql框架的高并发和商品秒杀项目完整源码+说明.zip

    2、适用人群:主要针对计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、数学、电子信息等)的同学或企业员工下载使用,具有较高的学习借鉴价值。 3、不仅适合小白学习实战练习,也...

    JAVA面试核心知识点整理.rar

    网络有协议,java 高并发io框架netty。数据结构包括堆栈,队列,链表,二叉树,红黑树,算法包括各种排序,贪心算法,动态规划。以及进阶的分布式,大数据,机器学习,内容非常全,精心总结的。

Global site tag (gtag.js) - Google Analytics