新書推薦：
《
周制与秦制
》
售價：HK$
153.6
《
花路
》
售價：HK$
105.6
《
万亿指数
》
售價：HK$
105.6
《
中世纪英国的财政、军事与外交（中外文明传承与交流研究书系）
》
售價：HK$
93.6
《
缺席者的历史：以色列十个遗失的部落
》
售價：HK$
93.6
《
晚清洋务运动始末
》
售價：HK$
95.8
《
美索不达米亚神话
》
售價：HK$
83.8
《
别害怕吵架：教孩子在冲突中学会正向沟通
》
售價：HK$
58.8
|
| 內容簡介： |
|
本书以达梦数据交换平台4.0为蓝本，全面系统地介绍了达梦数据交换平台的体系结构、安装与配置、转换和作业流程设计、达梦数据总线和集群等内容，是学习达梦数据交换平台的基础教材和参考用书。全书分为入门篇、基础篇和高级篇三个部分，内容涵盖达梦数据交换平台概述、安装与配置、快速入门、数据源管理、转换、作业、函数与变量、调度与监控、权限与版本管理、增量数据抽取、达梦数据交换集群、数据质量检测、Web监控与数据总线自定义转换和数据源开发、ETL接口编程等内容。本书结合具体实例，详细阐述了达梦数据交换平台各功能组件的使用方法，同时也介绍了集群、数据总线等高级内容，适合不同学习进度的读者使用。本书内容全面、举例丰富、操作性强、语言通俗、格式规范，可作为达梦数据交换平台的学习教材，也可作为工程技术人员的参考用书。
|
| 關於作者： |
|
张胜，博士，国防科技大学信息通信学院副教授，长期从事数据工程、数据管理等领域的教学与科研，主编参编《数据工程理论与技术》《军事信息管理》《作战数据管理技术基础》《达梦数据库应用基础》《达梦数据库SQL指南》等多部专著，先后获军队科技进步奖三等奖4项。
|
| 目錄：
|
入 门 篇
第1章 概述 2
1.1 数据交换基本概念 2
1.1.1 数据交换概念模型 2
1.1.2 数据交换技术的发展 3
1.2 数据交换体系结构 4
1.2.1 数据交换模式 4
1.2.2 数据交换体系组成 6
1.3 达梦数据交换平台简介 7
1.3.1 组成及功能 7
1.3.2 技术架构 10
1.3.3 特点 11
第2章 安装与配置 13
2.1 安装与卸载 13
2.1.1 Windows操作系统中的安装 13
2.1.2 Linux操作系统中的安装 21
2.1.3 升级安装 23
2.1.4 卸载 24
2.1.5 常见问题与注意事项 25
2.2 系统配置 27
2.2.1 启动与停止系统服务 27
2.2.2 服务器配置 30
2.2.3 元数据库配置 31
2.2.4 集群配置 33
2.2.5 数据总线服务配置 34
2.2.6 Web监控服务配置 35
2.2.7 查看许可证信息 36
2.2.8 监听服务器日志信息 37
2.2.9 日志参数配置 37
第3章 快速入门 38
3.1 设计器界面 38
3.1.1 设计器启动 38
3.1.2 界面简介 40
3.2 基本操作 40
3.2.1 设计 40
3.2.2 运行 43
3.3 入门示例 44
3.3.1 示例说明 44
3.3.2 创建数据源 45
3.3.3 创建工程 50
3.3.4 设计转换 51
3.3.5 设计作业 62
3.3.6 查看运行日志 66
基 础 篇
第4章 数据源管理 68
4.1 关系型数据库 68
4.1.1 关系型数据库概述 68
4.1.2 添加表 70
4.1.3 添加视图 70
4.1.4 添加SQL查询 71
4.1.5 表 73
4.2 文本文件 79
4.2.1 文本文件描述 79
4.2.2 文本文件选项配置说明 79
4.2.3 文本文件详细说明 79
4.3 CSV文件 80
4.3.1 CSV文件描述 80
4.3.2 CSV文件选项配置说明 80
4.4 Excel文件 80
4.4.1 Excel文件描述 80
4.4.2 Excel文件选项配置说明 81
4.5 XML文件 81
4.5.1 XML文件描述 81
4.5.2 XML文件选项配置说明 81
4.5.3 XML文件示例描述 82
4.6 数据集文件 83
4.6.1 数据集文件描述 83
4.6.2 数据集文件选项配置说明 83
4.7 DBF文件 84
4.7.1 DBF文件描述 84
4.7.2 DBF文件选项配置说明 84
4.8 JSON文件 84
4.8.1 JSON文件描述 84
4.8.2 JSON文件选项配置说明 84
4.8.3 JSON文件示例描述 85
4.9 HDFS文件 86
4.9.1 HDFS文件描述 86
4.9.2 HDFS文件选项配置说明 86
4.10 AVRO文件 86
4.10.1 AVRO文件描述 86
4.10.2 AVRO文件选项配置说明 87
4.11 JMS文件 87
4.11.1 JMS文件描述 87
4.11.2 JMS文件选项配置说明 87
4.11.3 JMS文件示例描述 87
4.12 WebSphere MQ 89
4.12.1 WebSphere MQ描述 89
4.12.2 WebSphere MQ选项配置说明 89
4.13 Kafka 89
4.13.1 Kafka描述 89
4.13.2 Kafka选项配置说明 89
4.14 WebService 90
4.14.1 WebService描述 90
4.14.2 WebService选项配置说明 90
4.15 LDAP 90
4.15.1 LDAP描述 90
4.15.2 LDAP选项配置说明 90
4.15.3 LDAP示例描述 91
4.15.4 添加LDAP DN数据集 91
4.16 Mail数据源 91
4.16.1 Mail数据源描述 91
4.16.2 Mail数据源选项配置说明 92
4.16.3 Mail数据源示例描述 92
4.16.4 添加Mail数据集 93
4.17 MongoDB数据源 94
4.17.1 MongoDB数据源描述 94
4.17.2 MongoDB数据源选项配置说明 94
4.17.3 MongoDB数据源示例描述 94
4.17.4 添加MongoDB数据集 94
4.18 Elasticsearch数据源 95
4.18.1 Elasticsearch数据源描述 95
4.18.2 Elasticsearch数据源选项配置说明 95
4.18.3 Elasticsearch数据源示例描述 96
4.18.4 添加Elasticsearch类型 96
4.19 Hbase数据源 97
4.19.1 Hbase数据源描述 97
4.19.2 Hbase数据源选项配置说明 97
4.19.3 Hbase数据源示例描述 98
4.19.4 添加Hbase表 98
4.20 导出元数据 99
4.20.1 导出元数据描述 99
4.20.2 导出元数据选项配置说明 99
4.20.3 导出元数据示例描述 99
4.21 导出数据 101
4.21.1 导出数据描述 101
4.21.2 导出数据选项配置说明 101
4.21.3 导出数据示例描述 101
第5章 转换 103
5.1 转换概述 103
5.1.1 转换功能描述 103
5.1.2 转换选项配置说明 103
5.2 转换通用配置 104
5.2.1 输出配置 104
5.2.2 高级属性配置 109
5.2.3 数据条数 111
5.2.4 文件切分 112
5.2.5 文件处理 113
5.2.6 文件选择 114
5.2.7 自动分表 116
5.2.8 流程运行统计 117
5.3 数据读取 118
5.3.1 读取表视图 118
5.3.2 SQL查询 120
5.3.3 读取增量表 122
5.3.4 读取文本文件 124
5.3.5 读取CSV文件 125
5.3.6 读取Excel文件 127
5.3.7 读取XML文件 128
5.3.8 读取数据集文件 129
5.3.9 读取JMS数据 131
5.3.10 读取WebService数据 133
5.3.11 读取LDAP数据 134
5.3.12 读取Mail数据 135
5.3.13 读取随机数据 136
5.3.14 读取自定义数据源 138
5.3.15 读取DBF文件 141
5.3.16 读取JSON文件 141
5.3.17 读取MongoDB数据 142
5.3.18 读取WebSphere MQ数据 143
5.3.19 读取网络输入数据 143
5.4 数据转换 143
5.4.1 数据清洗转换 143
5.4.2 联合 155
5.4.3 数据集查找 157
5.4.4 数据质量检测 159
5.4.5 SQL脚本 159
5.4.6 设置变量 161
5.4.7 排序 162
5.4.8 删除重复行 164
5.4.9 行数据抽样 165
5.4.10 自定义转换 166
5.4.11 聚合 167
5.4.12 列转行 168
5.4.13 行转列 170
5.4.14 系统命令 171
5.4.15 数据脱敏 171
5.4.16 连接 172
5.5 数据装载 172
5.5.1 表装载 172
5.5.2 增量表装载 174
5.5.3 缓慢变化维表装载 176
5.5.4 文本文件装载 181
5.5.5 CSV文件装载 182
5.5.6 Excel文件装载 183
5.5.7 XML文件装载 185
5.5.8 数据集文件装载 186
5.5.9 JMS装载 187
5.5.10 WebService装载 188
5.5.11 DBF文件装载 190
5.5.12 JSON文件装载 191
5.5.13 MongoDB装载 192
5.5.14 WebSphere MQ装载 192
5.5.15 Kafka装载 192
5.5.16 Elasticsearch装载 193
5.5.17 网络输出 193
5.6 快速装载 194
5.6.1 DM8快速装载 194
5.6.2 Greenplum快速装载 195
5.6.3 Oracle快速装载 197
5.6.4 MySQL快速装载 198
5.6.5 Infobright快速装载 199
5.6.6 Mariadb快速装载 200
5.6.7 Hive快速装载 200
5.7 文件同步 201
5.7.1 文件源 201
5.7.2 文件目的 203
5.7.3 文件同步示例 203
第6章 作业 206
6.1 作业概述 206
6.1.1 作业功能描述 206
6.1.2 作业选项配置说明 206
6.2 作业通用配置 207
6.2.1 高级属性 207
6.2.2 循环执行 208
6.3 引用 209
6.3.1 引用转换 210
6.3.2 引用作业 210
6.4 脚本 211
6.4.1 Java脚本 212
6.4.2 SQL脚本 213
6.4.3 设置变量 214
6.5 文件操作 216
6.5.1 基本文件操作 216
6.5.2 压缩 217
6.5.3 解压缩 218
6.5.4 远程文件同步 219
6.6 实用工具 221
6.6.1 发送邮件 221
6.6.2 OS命令 223
6.6.3 DLL调用 224
6.6.4 Ant 225
6.6.5 休眠 227
6.6.6 数据校验 228
6.7 系统维护 230
6.7.1 清除日志 230
6.7.2 刷新缓存 231
第7章 函数与变量 233
7.1 函数 233
7.1.1 函数定义 233
7.1.2 函数类型与作用域 234
7.2 变量 234
7.2.1 变量定义 234
7.2.2 变量类型与作用域 235
7.2.3 节点变量 235
7.2.4 局部变量 237
7.3 表达式 237
7.4 使用嵌入式表达式 238
7.5 数据类型 239
第8章 调度与监控 241
8.1 调度 241
8.1.1 新建调度 241
8.1.2 设置调度 243
8.1.3 调度引擎 245
8.2 监控 246
8.2.1 监控后台流程 246
8.2.2 查询历史日志 247
8.2.3 清除历史日志 249
8.2.4 实时告警 250
8.2.5 历史告警 251
8.2.6 清除告警 251
第9章 权限与版本管理 252
9.1 权限概述 252
9.1.1 功能权限 252
9.1.2 对象权限 253
9.2 角色 255
9.3 用户 256
9.3.1 用户概述 256
9.3.2 启用禁用用户 257
9.3.3 重置密码 257
9.4 版本管理 258
9.4.1 备份当前版本 258
9.4.2 自动备份 258
9.4.3 手动备份 259
9.4.4 查看历史版本 259
9.4.5 清除历史版本 260
9.4.6 还原删除对象 261
高 级 篇
第10章 增量数据抽取 264
10.1 增量数据抽取原理 264
10.1.1 增量数据抽取方式 264
10.1.2 DMETL增量数据表 267
10.2 增量数据同步设计 269
10.2.1 添加增量数据集 269
10.2.2 配置增量表数据抽取 270
10.2.3 配置增量表数据装载 271
10.2.4 配置首次同步时同步基表数据与设为首次同步 271
10.3 增量数据同步和增量方式配置示例 274
10.3.1 触发器方式同步示例 274
10.3.2 其他增量方式配置示例 278
第11章 达梦数据交换集群 283
11.1 集群概述 283
11.1.1 体系结构 283
11.1.2 集群特性 284
11.2 集群安装配置与管理 287
11.2.1 集群安装 287
11.2.2 集群
|
| 內容試閱：
|
序一
数据库已成为现代软件生态的基石之一。遗憾的是，国产数据库的技术水平与国外一流水平相比还有一定的差距。同时，国产数据库在关键领域的应用普及度相对较低，应用研发人员规模还较小，大力推动和普及国产数据库的应用是当务之急。
由电子工业出版社策划，国防科技大学信息通信学院和武汉达梦数据库股份有限公司等单位多名专家联合编写的国产数据库达梦丛书，聚焦数据库管理系统这一重要基础软件，以达梦数据库系列产品及其关键技术为研究对象，翔实地介绍了达梦数据库的体系架构、应用开发技术、运维管理方法，以及面向大数据处理的集群、同步、交换等一系列内容，涵盖了数据库管理系统及大数据处理的多个关键技术和运用方法，既有技术深度，又有覆盖广度，是推动国产数据库技术深入广泛应用、打破国外数据库产品垄断局面的重要工作。
国产数据库达梦丛书的出版，预期可以缓解国产数据库系列教材和相关关键技术研究专著匮乏的问题，能够发挥出普及国产数据库技术、提高国产数据库专业化人才培养效益的作用。此外，丛书对国产数据库相关技术的应用方法和实现原理进行了深入探讨，也将会吸引更多的软件开发人员了解、掌握并运用国产数据库，同时可促进研究人员理解实施原理、加快相关关键技术的自主研发水平。
倪光南
中国工程院院士
2020年7月
序二
作为现代软件开发和运行的重要基础支撑之一，数据库技术在信息产业中得到了广泛应用。如今，即使进入人人联网、万物互联的网络计算新时代，持续成长、演化和发展的各类信息系统，仍离不开底层数据管理技术特别是数据库技术的支撑。数据库技术从关系型数据库到非关系型数据库、分布式数据库、数据交换等不断迭代更新，很好地促进了各类信息系统的稳定运行和广泛应用。但是，长期以来，我国信息产业中的数据库大量依赖国外产品和技术，特别是一些关系国计民生的重要行业信息系统也未摆脱国外数据库产品。大力发展国产数据库技术，夯实研发基础、吸引开发人员、丰富应用生态，已经成为我国信息产业发展和技术研究中一项重要且急迫的工作。
武汉达梦数据库股份有限公司研发团队和国防科技大学信息通信学院，长期从事国产数据库技术的研制、开发、应用和教学工作。为了助推国产数据库生态的发展，扩大国产数据库技术的人才培养规模与影响力，电子工业出版社在前期与团队合作的基础上，策划出版国产数据库达梦丛书。该套丛书以达梦数据库DM8为蓝本，全面覆盖了达梦数据库的开发基础、性能优化、集群、数据同步与交换等一系列关键问题，体系设计科学合理。
国产数据库达梦丛书不仅对数据库对象管理、安全管理、作业管理、开发操作、运维优化等基础内容进行了详尽说明，同时也深入剖析了大规模并行处理集群、数据共享集群、数据中心实时同步等高级内容的实现原理与方法。特别是针对DM8融合分布式架构、弹性计算与云计算的特点，介绍了其支持超大规模并发事务处理和事务分析混合型业务处理的方法，实现动态分配计算资源，提高资源利用精细化程度，体现了国产数据库的技术特色。相关内容既有理论和技术深度，又可操作实践，其出版工作是国产数据库领域产学研紧密协同的有益尝试。
王怀民
中国科学院院士
2020年7月
序三
习近平总书记指出，重大科技创新成果是国之重器、国之利器，必须牢牢掌握在自己手上，必须依靠自力更生、自主创新。基于此，实现关键核心技术创新发展，构建安全可控的信息技术体系非常必要。
数据库作为科技产业和数字化经济中三大底座（数据库、操作系统、芯片）技术之一，是信息系统的中枢，其安全、可控程度事关我国国计民生、国之重器的重大战略问题。但是，数据库技术被国外数据库公司垄断达几十年，对我国信息安全造成了一定的安全隐患。
以武汉达梦数据库股份有限公司为代表的国产数据库企业，坚持40余年的自主原创技术路线，经过不断打磨和应用案例的验证，已在我国关系国计民生的银行、国企、政务等重大行业广泛应用，突破了国外数据库产品垄断国内市场的局面，保障了我国基本生存领域和重大行业的信息安全。
为了助推国产数据库的生态发展，推动国产数据库管理系统的教学和人才培养，国防科技大学信息通信学院与武汉达梦数据库股份有限公司，在总结数据库管理系统长期教学和科研实践经验的基础上，以达梦数据库DM8为蓝本，联合编写了国产数据库达梦丛书。该套丛书的出版一是推动国产数据库生态体系培育，促进国产数据库快速创新发展；二是拓展国产数据库在关系国计民生业务领域的应用，彰显国产数据库技术的自信；三是总结国产数据库发展的经验教训，激发国产数据库从业人员奋力前行，创新突破。
李国徽
华中科技大学软件学院院长、教授
2020年7月
前言
随着大数据时代的来临，采集、存储、处理和传输的数据与日俱增，而这些支撑各应用系统的数据通常位于不同的数据源中，为有效地利用这些数据，实现企业或社会组织的数据共享与交换，减少数据采集的重复劳动和相应费用，需要从多个分布、异构和自治的数据源中集成数据，同时还需要保持数据在不同系统中的完整性和一致性。因此，对数据进行有效集成已成为增强企业市场竞争力的必然选择，为了促进各部门间的合作和数据共享，建立一个完善的数据交换和集成系统是极有应用价值且极为重要的。
达梦数据交换平台是武汉达梦数据库股份有限公司在十余年数据处理经验的基础上，研制开发的具有自主版权的、商品化的数据交换与处理平台。达梦数据交换平台创新地将传统的ETL（Extract、Transform、Loading）工具与分布式消息平台相结合，实现了对数据抽取、传输、整合及装载的一站式支持，是构建数据中心、数据仓库、数据交换和数据同步等数据集成类应用的理想平台，同时也可以作为数据加工处理工具由业务人员直接使用。
本书分为入门篇、基础篇和高级篇三个部分，全面系统地介绍了达梦数据交换平台概述、安装与配置、快速入门、数据源管理、转换、作业、函数与变量、调度与监控、权限与版本管理、增量数据抽取、达梦数据交换集群、数据质量检测、Web监控与数据总线自定义转换和数据源开发、ETL接口编程等内容。本书结合具体示例，详细阐述了达梦数据交换平台各功能组件的操作使用，同时也介绍了集群、数据总线等高级内容，适合不同学习进度的读者使用。
本书编写定位和要求由戴剑伟确定，大纲由张胜、梅纲拟制。第1章由戴剑伟执笔，第2、3章由王龙执笔，第4～9章由张守帅、李韬伟执笔，第10～13章由张胜、刘志红执笔，第14、15章由徐飞、张胜、祁超执笔，全书由曾昭文主审，付铨、张海粟、文峰、李向朋、刘培磊等同志在本书编写过程中承担了大量工作，最后统稿由张胜、王龙、祁超、李向朋完成。
在本书编写过程中，编者参考了武汉达梦数据库股份有限公司提供的相关技术资料，在此表示衷心的感谢。由于编者水平有限，加之时间仓促，书中难免有错误与不妥之处，敬请读者批评指正。读者在学习过程中有任何疑问，可发送邮件至791679213@qq.com与我们交流，也欢迎访问达梦数据库官网、达梦数据库官方微信公众号达梦大数据，或者拨打服务热线400-991-6599获取更多达梦数据库资料和服务。
编 者
2020年6月于武汉
|
|
購物車/收銀台(
0
) | 在線留言板
| 付款方式
| 運費計算
| 聯絡我們
| 幫助中心 |
加入書簽
HOME
新書上架
