esb数据集成平台 etl

详细介绍了数据抽取的几种主要办法

面向数据集成的ETL技术研究

时间:2009-12-18 13:52来源: 作者: 点击:

34次

数据集成是把不同来源、格式和特点的数据在逻辑上或物理上有机地集中，从而为企业提供全面的数据共享，是企业商务智能、数据仓库系统的重要组成部分。 随着单位information化建设的扩展，巨大的投入资金为单位建立了众多的informationwindows，以帮助单位进行内外部业务的处理和管理工作。但是随着informationwindows的增加，各自孤立工作的informationwindows将会造成大量的冗余数据和业务人员的重复劳动。单位应用集成(EAI Picture EXP操作系统lorer，Enterprise Application Integration)应运而生。EAI Picture EXP操作系统lorer通过建立底层数据交换平台来联系横贯整个单位的异构

windows、应用、数据源等，完成在单位内部的ERP、CRM、SCM、数据库、数据仓库，以及其它重要的内部windows之间无缝地共享和交换数据的需要。数据集成是单位应用集成的重要环节，单位实现数据集成，可以使更多的人更充分地试用已有数据资源，

德阳银行-应用集成平台ESB项目-接口说明书

移动代收

ESB与核心系统接口说明书

德阳银行应用集成平台ESB项目组

2011-11-08

第 1 页 共 20 页 北京先进数通信息技术有限公司

德阳银行-应用集成平台ESB项目-接口说明书

接口设计说明书

文档信息

项目名称 文档编号 德阳银行应用集成平台ESB项目 用户信息

用户名称 德阳银行 合作开发方信息

合作开发方名称 北京先进数通信息技术有限公司

修订记录

版本号 0.1 1.0 日期 2011-11-8 2012-2-9 初稿 修订说明 与中间业务前置人员讨论后确定 编写或修订人 李海超 李海超 审核 孙开乾

第 2 页 共 20 页 北京先进数通信息技术有限

Informatica PowerCenter平台

ETL开发规范

Informatica PowerCenter平台 ETL开发规范 文档历史记录

变更历史

最后更新时间: 2015-07-21 版本 V1.0 更新日期 2015-07-20 作者 叶兆明 变更描述 创建全文 审 阅

姓名 角色 审阅章节 意见与签名 分 发

Name Role

Page: 2 of 39

Informatica PowerCenter平台 ETL开发规范 文 档 目 录

1. 文档介绍 ................................................................................................................................................... 5 1.1 1.2 1.3 1.4 1.5

文档目的 ......................................

Informatica PowerCenter平台

ETL开发规范

Informatica PowerCenter平台 ETL开发规范 文档历史记录

变更历史

最后更新时间: 2015-07-21 版本 V1.0 更新日期 2015-07-20 作者 叶兆明 变更描述 创建全文 审 阅

姓名 角色 审阅章节 意见与签名 分 发

Name Role

Page: 2 of 39

Informatica PowerCenter平台 ETL开发规范 文 档 目 录

1. 文档介绍 ................................................................................................................................................... 5 1.1 1.2 1.3 1.4 1.5

文档目的 ......................................

Informatica PowerCenter平台 ETL开发规范 January 12, 2010

广州安正软件科技有限公司

BusinessMatrix Information System Corporation.

Informatica PowerCenter平台 ETL开发规范 文档历史记录

变更历史

最后更新时间: 2014-03-31 版本 V1.0 更新日期 2010-09-19 作者 孙承佼 变更描述 创建全文 审 阅

姓名 角色 审阅章节 意见与签名 分 发

Name Role

BusinessMatrix Information System Corporation 2006 March 31, 2014

Page: 2 of 36

Informatica PowerCenter平台 ETL开发规范 文 档 目 录

1. 文档介绍 .........................................................................

Informatica PowerCenter平台

ETL开发规范

Informatica PowerCenter平台 ETL开发规范 文档历史记录

变更历史

最后更新时间: 2015-07-21 版本 V1.0 更新日期 2015-07-20 作者 叶兆明 变更描述 创建全文 审 阅

姓名 角色 审阅章节 意见与签名 分 发

Name Role

Page: 2 of 39

Informatica PowerCenter平台 ETL开发规范 文 档 目 录

1. 文档介绍 ................................................................................................................................................... 5 1.1 1.2 1.3 1.4 1.5

文档目的 ......................................

Informatica PowerCenter平台

ETL开发规范

Informatica PowerCenter平台 ETL开发规范 文档历史记录

变更历史

最后更新时间: 2015-07-21 版本 V1.0 更新日期 2015-07-20 作者 叶兆明 变更描述 创建全文 审 阅

姓名 角色 审阅章节 意见与签名 分 发

Name Role

Page: 2 of 39

Informatica PowerCenter平台 ETL开发规范 文 档 目 录

1. 文档介绍 ................................................................................................................................................... 5 1.1 1.2 1.3 1.4 1.5

文档目的 ......................................

Informatica PowerCenter平台

ETL开发规范

Informatica PowerCenter平台 ETL开发规范 文档历史记录

变更历史

最后更新时间: 2015-07-21 版本 V1.0 更新日期 2015-07-20 作者 叶兆明 变更描述 创建全文 审 阅

姓名 角色 审阅章节 意见与签名 分 发

Name Role

Page: 2 of 39

Informatica PowerCenter平台 ETL开发规范 文 档 目 录

1. 文档介绍 ................................................................................................................................................... 5 1.1 1.2 1.3 1.4 1.5

文档目的 ......................................

目录

第1章项目申请的必要性 (4)

1.1数据交换平台的研究意义 (4)

1.2数据交换技术的发展情况 (4)

1.3本项目研究的目的和内容 (5)

1.4本项目的先进性及创新性 (6)

第2章申报单位情况 (8)

2.1申报单位基本情况 (8)

2.2研究开发能力................................................................................................ 错误!未定义书签。

2.2.1项目组成员 ...................................................................................... 错误!未定义书签。

2.2.2项目主要承担人员简介 .................................................................. 错误!未定义书签。

2.2.3项目研发的现有基础 ...................................................................... 错误!未定义书签。

2.3

InfoQ：鉴于开源ESB目前的状态，您认为能够把它们看作是商业产品相当的替代品么？

Tijs Rademakers (TJ)：我曾经有幸使用过商业产品（非开源）和开源ESB。在使用Mule ESB时我有一个惊人发现，即它让企业集成和面向服务这些个复杂工作变得容易。使用商业ESB就意味着，前期巨额的许可费用，繁重的安装过程，不得不学习新的IDE，必须从可用文档和售后咨询那里学习。在你处理完这些前期成本后，著名的非开源ESB产品，诸如WebSphere，Tibco，Sonic 等，才能尽其所能。至于开源ESB，你一开始得把它先下载下来，10分钟后，你就拥有了一个携带可用范例的ESB环境。接着，看一看范例的配置文件，你就能相当容易地实现你自己的集成解决方案。实现一项定制功能意味着：写一个Java类和使用Mule ESB Java API。这对于Java开发人员是很容易理解的。而且要是你有什么不知道的，还有活跃的大型社区可以让你在邮件列表中进行提问。 Jos Dirksen (JD)：我认为，从核心的ESB功能看，目前开源社区中的领先者当然能够看作是商业产品相当的替代者。例如路由，转换和连通性是开源ESB能够替代或者比许多商业产品表现更好的方面。同