最新文章列表

Taskctl与Kettle比较

 懂的小伙伴可能会觉得我为什么会那这两个软件来比较,Kettle是名声在外的开源ETL工具,taskctl是个啥?不是一个调度工具嘛?可能因为taskctl说的是ETL ...
taskctl2012 评论(0) 有330人浏览 2020-06-10 11:07

以太坊分片Sharding FAQ

简介 目前,在所有的区块链协议中每个节点存储所有的状态(账户余额,合约代码和存储等等)并且处理所有的交易。这提供了大量的安全性,但极 ...
it_node 评论(0) 有488人浏览 2018-06-10 15:50

hive文件类型与压缩

1.概述     数据仓库在建设使用的过程中,主要消耗的资源包含:CPU、MEMORY、DISK三部分。 数据仓库在计算过程中主要消耗CPU和Memory资源,当然也会 ...
student_lp 评论(0) 有2612人浏览 2017-05-23 23:16

基于Apache Flume Datahub插件将日志数据同步上云

简介 Apache Flume是一个分布式的、可靠的、可用的系统,可用于从不同的数据源中高效地收集、聚合和移动海量日志数据到集中式数据存储系统,支持多种Source和Sink插件。本文将介绍如何使用Apache Flume的Datahub Sink插件将日志数据实时上传到Datahub。 环境要求 JDK (1.7及以上,推荐1.7) Flume-NG 1.x Apache Maven ...
iyulang 评论(0) 有8人浏览 2017-04-17 12:22

redis实践-cluster搭建

redis3开始支持cluster集群模式,解决单点的瓶颈问题,本文以3.0.3为例搭建并测试cluster集群 搭建步骤            一.安装ruby                 a) wget https://cache.ruby-lang.org/pub/ruby/2.2/ruby-2.2.3.tar.gz                 b) tar -xvzf r ...
luoshi0801 评论(0) 有1362人浏览 2015-09-17 10:22

数据存储于分析

磁盘的读写,一直未能跟着时代发展。1990时代,普通硬盘有1370MB左右的空间,而速度4.4MB/S,而此速度要读取全部数据,5分钟差不多了。而如今1TB的很正常,但是速度只有100MB/S左右,因此读取1TB速度,可能需要两个半小时。而写则更慢。 比较简单的优化方式,可以将1TB数据分散到不同磁盘,比如100个磁盘,每次读取数据,可以让多个磁盘同时进行,那么时间可能被所小100倍(最完美情况) ...
liyixing1 评论(0) 有587人浏览 2015-06-23 13:33

数据仓库简介---组成

   数据仓库的组成部分有:针对数据源的分析、数据的迁移、数据的存储结构、元数据管理等。 数据源分析:业务系统的源数据通常来自企业的内部信息和外部信息。内部信息指来自企业的生产数据和历史归档数据;而企业的生产数据有可能来自于不同的业务系统,如何将这些业务数据进行标准化,转换成数据仓库可以存储的数据,从而保证数据仓库中数据的一致性,这是数据源分析最重要的一步。(归档历史数据一般是指将大量的、不常 ...
student_lp 评论(0) 有1922人浏览 2015-05-19 12:12

Android数据存档SharedPreferences(1)

App运行中,需要配置很多的参数信息,这些参数信息保存在哪里呢? SharedPreferences 配置信息存储 这个接口保存只是一些基本数据类型,例如String,i ...
梳子不爱头发 评论(0) 有1056人浏览 2015-04-12 11:14

将数据放至数据库外或文件系统来提高报表系统性能

         在报表应用中,针对历史数据查询的报表占比很大,这类报表的特点是:第一,数据变化小,查询的历史数据几乎不会发生变化;第二,数据量大,数据量随时间跨度增大而不断增加。如果数据始终存放在数据库中,由于大多数数据库的JDBC性能都很低下(JDBC取数过程要做数据对象转换,比从文件中读取数据会慢一个数量级),这时涉及数据量较大或在并发较多的时候,报表的性能会急剧下降。如果能将这些变化不大的 ...
datamachine 评论(2) 有1234人浏览 2015-02-06 15:06

Java编程思想第四版(中文扫描版)

<div class="iteye-blog-content-contain" style="font-size: 14px"></div>
pengyi_888 评论(0) 有520人浏览 2014-12-29 00:43

Android数据的四种存储方式

Android系统一共提供了四种数据存储方式。分别是:SharePreference、SQLite、Content Provider和File。由于Android系统中,数据基本都是私有的的,都是存放于“data/data/程序包名”目录下,所以要实现数据共享,正确方式是使用Content Provider。   SQLite: SQLite是一个轻量级的数据库,支持基本SQL语法,是常被采用的一 ...
scarlettli 评论(0) 有630人浏览 2014-11-07 15:46

android-数据存储(保存读取密码-附源码)

android-loginview.png 功能要求 : 用户名zhangsan 密码 123  为正确登录状态 如果勾选记住密码  会在登录之前保存 用户名密码到应用程序 /files/infx.txt文件中 存储格式为  用户名##密码   接下来 是 xml  代码     <LinearLayout xmlns:android="http://schema ...
15035554141 评论(0) 有3735人浏览 2014-07-22 17:04

Party_bid 第一张卡总结

刚刚完成了Party_bid的第一张卡,第一次接触RubyMine工具,使用angularjs进行web开发,确实学到了不少知识,收获颇多,下面是我对第一张卡的总结: 一、工程项目的环境配置 1、安装yeoman yeoman的目标是通过Grunt(一个用于开发任务自动化的命令行工具)和Bower(一个HTML、CSS、Javascript和图片等前端资源的包管理器)的包装为开发者创建一个 ...
a904143034 评论(0) 有4831人浏览 2014-07-16 21:54

现行海量数据离线存储介质类型比较

现行海量数据离线存储介质类型比较 现行的海量数据管理按照存储介质类型可分为磁带式、光盘式和硬盘式三种。 1  磁带介质    磁带存储器属于磁表面存储,是用某些磁性材料薄薄地涂在金属铝或塑料表面载磁体来存储信息。磁带控制机是连接计算机与磁带机之间的接口设备。它是计算机在磁带上存取数据用的控制电路设备,可控制磁带机执行写、读、进退文件等操作。它由磁带传送机构、伺服控制电路、读写磁头、读写电 ...
rainny 评论(0) 有12人浏览 2014-07-07 19:26

国外海量数据离线存储产品应用

在当先信息技术高速发展的情况下,不同类型的信息、数据爆发式的产生。同时,当今社会及经济发展中需要将从前工作、生活、经济活动所产生的非 ...
rainny 评论(0) 有12人浏览 2014-07-07 19:17

Android学习笔记之9数据存储

数据存储 典型的桌面OS的文件系统是公共文件系统——任何软件可以使用它来存储和读取文件,改文件也可以被其他应用程序所读取。 Android提供了不同的文件系统,所有应用程序数据为该应用程序私有。当然也可以通过统一的借口提供给其他应用程序访问。   10.1SharedPreferences 用于存储简单的配置信息,如欢迎语、用户名及密码,以键值对方式存储。 初始化对象:
aoyouzi 评论(0) 有705人浏览 2013-11-11 10:05

DDAL技术方案选型

解决的问题 目前已经面临或者未来可能面临的问题有以下这些: 1.数据量越来越大,超出了单表或者单库的最大限制。 2.数据访问压力越来越大,超出了数据库系统能力。访问压力可能出现读压力过大或者写压力过大。 3.数据访问层运维问题。 4.数据访问层高可用方案。 5.数据访问层访问控制和管理。
ywbrj042 评论(2) 有11351人浏览 2013-08-13 11:44

(转)谷歌三大核心技术(一)Google File System中文版

谷歌三大核心技术(一)Google File System中文版 The Google File System中文版 译者:alex 摘要 我们设计并实现了Google GFS文件系统,一个面向大规模数据密集型应用的、可伸缩的分布式文件系统。GFS
xuanyuan77777 评论(0) 有1355人浏览 2013-02-11 18:04

java对象的存储

数据运行时,有6个地方可以保存数据: 寄存器:最快,cpu内部,数量小,由编译器分配 堆栈:ram区域,通过堆栈指针处理,指针向下创建新内存,向上移释放内存,速度仅存寄存器。一般引用在此,对象不在 堆:ram区域,java对象 静态存储:ram固定区域,static关键字指定数据,java对象不会在此 常数存储:程序内部或者rom中 非RAM存储:程序之外
gmma小马 评论(0) 有450人浏览 2012-12-28 11:13

最近博客热门TAG

Java(141744) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54919) .net(54785) Web(54514) 工作(54118) Linux(50905) Oracle(49875) 应用服务器(43289) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37267) 数据结构(36424)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics