最新文章列表

zimg服务器图片数据迁移后,图片404异常的问题解决

由于zimg特殊的图片存储结构及图片命名规则,其迁移数据应该当相当简单的,仅把对应的存储图片数据的文件夹复制即可。往往简单的东西总会有一些成本在里面,下面是我简单的迁移测试过程中遇到的一些问题,仅供参考【两服务的配置文件异同不影响数据迁移】   先排除低版本迁移高版本产生的问题,比如zimg 2.x 文件格式为0_0,但新版本zimg 3.x存储格式变为0*0。     1、直接从A服 ...
guooo 评论(0) 有1211人浏览 2017-08-18 16:57

[大数据新手上路]“零基础”系列课程--如何将ECS上的Hadoop数据迁移到阿里云数加·MaxCompute

想用阿里云数加·大数据计算服务(MaxCompute),但是现在数据还在hadoop上,怎么办?       别烦恼,跟着我们走,来一次MaxCompute零基础数据迁移之旅~Let’s Go!  
iyulang 评论(0) 有8人浏览 2017-04-13 21:32

【大数据干货】数据进入阿里云数加-大数据计算服务MaxCompute(原ODPS)的N种方式

想用阿里云大数据计算服务(MaxCompute),对于大多数人首先碰到的问题就是数据如何迁移到MaxCompute中。按照数据迁移场景,大致可以分为批量数据、实时数据、本地文件、日志文件等的迁移,下面我们针对每种场景分别介绍几种常用方案。   一、   异构数据源批量数据迁移到MaxCompute 1、通过大数据开发套件(DataIDE)- 数据开发做数据同步              ...
iyulang 评论(0) 有13人浏览 2017-04-13 21:28

EF应用CodeFirst模式,数据迁移的基本用法要点摘记

第一次使用EntityFramework做CodeFirst的开发,在做数据迁移时遇到不少问题,花费了一整天的时间学习调整,总算时学会了基本用法和要点。现在整理后贴出来,希望对和我一样的初用者能有一些帮助,少走一些弯路,少花一点时间摸索,都是值得的。[plain] view plain copy print? 一. 模型设计       1.  遵循EF标准,注意表关系配对        ...
枫叶主人 评论(0) 有1047人浏览 2016-10-30 23:04

Debian上更改mysql的数据文件位置

1. 停止mysql服务 service mysql stop  2. 迁移数据文件(假设迁移目标是/data/mysql) cp -R /var/lib/mysql /data chown -R mysql:mysql /data/mysql   3. 修改mysql配置文件(假设迁移目标是/data/mysql)  /etc/mysql/my.cnf datadir = / ...
wynet321 评论(0) 有1614人浏览 2016-05-25 07:02

Hadoop+Hbase集群数据迁移问题

数据迁移或备份是任何一个公司都有可能到遇到的一件事,有关hbase数据迁移,官网也给出了几种方案,这里比较推荐使用hadoop distcp这种方式迁移。比 ...
qindongliang1922 评论(3) 有2475人浏览 2016-03-23 21:00

Redis利用持久化进行数据迁移

前言       Redis是一个开源的高性能键值对数据库。它通过提供多种键值数据类型来适应不同场景下的存储需求,并借助许多高层级的接口使其可以胜任如缓存、队列系统等不同的角色。 Redis持久化了解       为了让性能更加优异,Redis默认是把所有的数据都存在内存中的。但是当服务器重启或程序异常崩溃时,Redis的数据就会全部丢失。因此出现了持久化的概念。持久化就是将存在内存中的数据同 ...
Horsemen 评论(0) 有664人浏览 2015-09-11 18:35

MYSQL/REDIS/MONGODB 服务器间数据迁移

一、Mysql迁移 遇到的问题: 1. 命令行中无法使用password. 解决方法:vi /etc/my.cnf 在[mysqldump]中添加 user=** password=** 原始数据库导出 mysql -uroot -p CU > CU.sql 压缩成Zip tar czvfP backup.tar.gz ./*.sql 传输到目标服务器 scp root@54.*. ...
fredlong 评论(0) 有1411人浏览 2015-07-30 18:22

SSMA for Oracle 示例(Oracle数据迁移至SQLSERVER)

参阅:http://blog.sina.com.cn/s/blog_665813d201014n9h.html
gqsunrise 评论(0) 有1202人浏览 2015-03-26 13:39

将文本中的数据导入到数据库中

       在项目中,有时候我们需要做数据迁移,这边我介绍下一个简单的方式,就是先把数据导出到文件中,然后再通过sql将文件中的数据导入到另外一张表中,下面是依次执行顺序。   第一步:从原数据表中导出数据 将原数据表中导出数据,使用sql如下: EXPORT TO shopInfo.del OF del SELECT A.SHOPID AS "shop ...
guyunduzai 评论(0) 有557人浏览 2015-02-12 23:34

新旧系统更替产生的数据迁移问题

新旧系统更替产生的数据迁移问题 作者:西安项目组夏凯撰文时间:2004.11.08 在信息化建设过程中,随着技术的发展,原有的信息系统不断被功能更强 ...
wangtf6 评论(0) 有1332人浏览 2014-12-29 15:44

运用java自带线程池多线程执行任务

今天被老大交给了一个任务,对数据库中原有的数据进行一定的操作,然后放入到另外一张表中。 那么我拿到这个任务,分析了下业务逻辑就开始编码了,经过一上午的代码开发,运行测试,功能完好,但是速度实在太慢了,1000万的数据量执行了5个小时,速度必须要提上来,这时候我想到了使用多线程。     但是问题来了,我之前没有使用过多线程,怎么办呢,百度。经过百度后,我尝试着使用java提供的线程池管理线程 ...
guyunduzai 评论(4) 有2665人浏览 2014-11-26 21:47

Redmine升级/迁移

http://bitnami.org/article/how-to-backup-and-update-the-bitnami-redmine-stack#updating-stack 原环境说明: 安装目录:/opt/redmine 数据库文件:/opt/redmine/apps/redmine/config/database.yml 邮件文件:/opt/redmine/apps/re ...
Chinaperson 评论(0) 有2384人浏览 2014-11-07 17:31

用sqlldr进行数据迁移

公司的业务场景如下: 某一个体系需要进行重构,其中包括表的重新设计和库表数据迁移。而这一块是我负责的,经历了从Java,到DML,到PLSQL的方案转移。之所以写这么多,是想记录我自己的探索过程,如果想看使用sqlldr进行数据迁移的直接步骤,直接跳到“方案3”的结尾处。   方案1:用Java进行数据迁移 最先开始选择用Java,是因为之前接触存储过程不是很多,用Java来写,操作对象 ...
josico 评论(0) 有2369人浏览 2014-09-04 15:48

hadoop集群数据迁移

hadoop distcp hdfs://namenode1/foo hdfs://namenode2/bar 如果想在两个运行着不同版本HDFS的集群上利用distcp,使用hdfs协议是会失败的,因为RPC系统是不兼容的。想要弥补这种情况,可以使用基于HTTP的HFTP文件系统从源中进行读取。这个作业必须运行在目标集群上,使得HDFS RPC版本是兼容的。 例如:hadoop distcp h ...
lookqlp 评论(0) 有6511人浏览 2014-08-04 22:31

DB2数据迁移-LOAD工具

数据迁移是一项常见的工作, DB2提供Load实用程序来高效导入大量的数据   Load命令的基本格式如下   LOAD FROM "/home/db2inst1/pro.del" OF DEL METHOD P ( 1 ...
Azurer 评论(0) 有1382人浏览 2014-02-19 13:21

不同数据库之间的不同表结构的数据迁移

Author 陈礼松 最近在在项目组中碰到一个这样的问题,我们做的新系统需要老数据库中导入,就出现了这样的问题 1. 不同的数据库之间的数据迁移; 2. 表结构变化很大; 3. 支持多张表多种字段的对应的数据迁移; 4. 考虑数据量很大的迁移。 然后就写了一个小工具,能解决这样的问题,感觉功能还是蛮通用的,所以就分享一下,主要实现功能:       1. 表字段数据对应关系的可配置化 config. ...
chen291382932 评论(3) 有4625人浏览 2014-02-13 12:22

数据迁移工具sqoop入门

首先,先简单说明下sqoop是什么,sqoop 即 SQL to Hadoop ,是一款方便的在传统型数据库与Hadoop之间进行数据迁移的工具,充分利用MapReduce并行特点以批处理 ...
qindongliang1922 评论(2) 有5078人浏览 2013-12-29 22:07

最近博客热门TAG

Java(141744) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54919) .net(54785) Web(54514) 工作(54118) Linux(50905) Oracle(49875) 应用服务器(43289) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37267) 数据结构(36424)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics