`
aa8945163
  • 浏览: 270646 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

企业应用数据迁移

 
阅读更多
开源ETL工具 Kettle
Kettle是一款国外开源的etl工具,纯java编写,绿色无需安装,数据抽取高效稳定(数据迁移工具)。Kettle中有两种脚本文件,transformation和job,transformation完成针对数据的基础转换,job则完成整个工作流的控制。


0 准备工作:

1、做好原始数据备份,这个不再赘述;
2、建立老系统和新系统模型的对应关系,如果发现对应不上的情况,赶紧修改;即使已经建立过关系,强烈建议再次进行核对。
3、确定迁移时间:
   3.1何时进行迁移:一般来说,选择夜间没有新业务时;
   3.2初步估计迁移需要多少时间:如数据较多,迁移时间较长,可以考虑将数据按条件分多个批次进行迁移。

迁移:
1、选择工具:如果是相同类型的数据库的迁移,可以考虑用存储过程,更推荐使用数据迁移工具来做,一般来说,就kettle就够了;如果是超大数据量,还不差钱的话,可以使用商业工具,Informatica,ODI等等;
2、数据库环境:建议搭建一个与新系统完全相同的测试环境,至少数据库环境要完全相同;
3、迁移:这个用工具,将老系统数据迁移到测试环境的数据库,具体过程不再赘述;如果不同类型的数据库,要特别注意数据类型之间的匹配关系;

完成迁移:
1、迁移完成后,立即启用新系统,让新系统使用测试环境的数据库,如果发现有问题,在进行修改。

基本上就这些了,最后总结一下:
1、一定要做好规划;
2、测试、测试、再测试。

分享到:
评论

相关推荐

    论文研究-传统RDBMS向非关系型MongoDB数据模型转换与数据迁移方法研究.pdf

    针对上述方案和算法,结合典型开源RDBMS-MySQL实例,对上述关系有向图模型的生成、基于有向图模型的转换算法以及数据迁移算法应用进行验证,实验结果表明RDBMS可以按照一定的数据结构平滑地迁移到MongoDB中。

    Sqoop企业级大数据迁移方案全方位实战视频教程

    第一章:企业数据迁移需求及解决方案 1.企业级数据迁移及同步需求 2.Sqoop的设计思想 3.Sqoop与Hadoop的关系 4.Sqoop的分布式实现原理 5.Sqoop的企业级版本选型 6.Sqoop的部署安装及配置 第二章:Sqoop...

    最新云平台和数据库平台迁移方案合集(21份).zip

    企业应用迁移到云中规划实践指南 千亿级数据迁移和同步平台的架构实践 无感平滑迁移:海量高并发数据库国产化改造及应用 业务迁移基本流程设计与华为迁移方案概述 银行数据库改造之路:Oracle to MySQL迁移实践 用...

    云雀 是一款数据集成工具,实现异构数据源的整合,帮助企业构建数据仓库、数据湖 等应用架构

    云雀 是一款数据集成工具,实现异构数据源的整合,帮助企业构建数据仓库、数据湖 等应用架构。云雀目前支持数据源达到14种,能够实现异构数据源的同步。云雀支持拖拉拽的图形化的操作,用户可以通过页面的组装输入和...

    如何在敏捷开发中做好数据迁移

    在企业级应用系统中,新系统的开发,新旧系统的升级换代,以及正常的系统维护,不可避免地涉及到大量的迁移工作。而在一个以数据为核心的业务系统中,数据的迁移更是无处不在。比如:在以数据仓库为架构原型的系统...

    ADAM产品助力企业快速数据库和应用云化唐修.pdf

    ADAM studio数据迁移特性 业务改造-测试 系统优化—风险SQL识别 云数据库PPAS(高度兼容Oracle) 云数据库PPAS - 提高Oracle迁移上云成功率 云数据库PPAS - Oracle兼容的数据类型 云数据库PPAS - Oracle兼容的DDL 云...

    现代企业零信任安全构建应用指南.pdf

    企业零信任能力构建指南(企业零信任需求评估、遵循的基本原则、架构设计的建议、旧系统迁移的架构、新系统建设的建议),行业应用实践(银行远程办公的零信任应用、制造企业权限管控的零信任应用、流动数据管控的零...

    FLEX企业应用开发实战.part1

    第1章 Flex企业应用开发入门  1.1 B/S企业应用开发者的噩梦  1.2 噩梦结束,新时代来临  1.3 Flex概述  1.4 Flash Player的工作模型  1.4.1 Flash Player的帧执行模型  1.4.2 Flash Player渲染模型  ...

    企业级核心应用跨平台无缝迁移.pdf

    企业级核心应用跨平台无缝迁移.pdf

    新老系统迁移及整合方案

    另外,新开发的系统还存在与其他一些应用系统,例如,企业信用联网应用系统、企业登记子网站、外资登记子网站等系统进行整合使之成为一个相互连通的系统。本章将针对新老系统迁移和整合提出解决方案。

    基于元数据驱动的通用数据迁移工具 (2011年)

    为解决企业数据模型升级需要在数据库间实现数据迁移的问题,创建基于元数据驱动的通用数据迁移工具,分析数据抽取、转换和加载体系结构,采用元数据驱动技术,结合企业数据迁移需求,定义数据迁移通用框架模型体系;...

    基于云计算平台的应用系统迁移的研究与应用

    云计算服务在降低企业、 政府、 个人的信息化建设成本和运营维护成本方面的优势获得了越来越 多的认可,许多全球 500 强企业、 因外宜要政府部门都已经使用云计算服务处理 内部数据和管理流程。

    FLEX企业应用开发实战.part2

    第1章 Flex企业应用开发入门  1.1 B/S企业应用开发者的噩梦  1.2 噩梦结束,新时代来临  1.3 Flex概述  1.4 Flash Player的工作模型  1.4.1 Flash Player的帧执行模型  1.4.2 Flash Player渲染模型  ...

    云迁移全攻略:哪些应用适合迁移?

    企业在进行云迁移时,有很多因素需要考虑,例如如何有效地将数据迁移到云中,如何解决存储在云中的数据安全问题,如何满足法规遵从要求,如何避免软件许可证的混乱,如何测试时延问题等,以及当与其云服务商关系破裂...

    GISKingbaseES-V8-GIS数据迁移方案.pdf

    人大金仓作为国产数据库软件头部企业,潜心多年现推出具有自主知识产权的数据管理软件产品 KingbaseES, 该产品可广泛应用于政务信息化、企业信息化和个人信息服务等领域。KingbaseES V8 数据库可以替代国外 数据库...

    VA虚拟应用管理平台 v5.1.0.7218.zip

    虚拟应用可以轻松实现企业应用和数据的集中部署、应用数据共享、数据安全和保护、降低企业IT成本等需求,广泛应用于分支机构、异地部署、集中应用、数据保护、企业、高校、家庭等全方位应用。 VA虚拟应用管理平台...

    嵌入式系统/ARM技术中的云迁移全攻略:哪些应用适合云迁移?

     一家小企业在把4台服务器迁移到云中之后,基本上就关闭了企业内的数据中心,从而实现了50%的成本节约。 也就是说大企业只能一次迁移少量的服务器,所以上述统计数字便可看成是大企业也可能去做的事情。  成本...

    Q&A—企业应用云迁移评估、策略、技术选型及实战

    2020年2月13日,新钛云服举办的云运维之路系列沙龙—《企业应用云迁移评估、策略、技术选型及实战》直播现场火爆。更有刷屏级提问,为满足广大技术人的求知欲,我们特将互动提问梳理,由著名云技术专家孙杰&新钛云服...

Global site tag (gtag.js) - Google Analytics