上海涛德顾问学院

查看: 6665|回复: 0

Oracle Big DATA 大数据连接器简介

[复制链接]
匿名
匿名  发表于 2014-5-26 14:38:37
连接器可以用来在大数据和 Oracle 数据库间提供数据传输。Oracle 大数据连接器一共由 4种工具构成。

本文作者:涛德顾问学院讲师


一:Oracle Direct Connector for HDFS
作用是Oracle 数据库直接访问 Hadoop 集群上的大数据而不用加载该数据

Oracle Direct Connector for HDFS (ODCH) 是一种连接器,通过外部表使得从 HDFS Oracle 数据库的读取访问更便捷。
它使用 ORACLE_LOADER 访问驱动程序。
通过它您可以:
访问大数据而不用加载该数据
访问 HDFS 文件中存储的数据
访问由 Oracle Loader for Hadoop 生成的 CSV(逗号分隔值)文件和数据泵文件
加载由 Oracle Data Integrator 提取和转换的数据




Oracle Loader for Hadoop
用于将大数据加载到 Oracle 数据库内的表中

Oracle Loader forHadoop 是一种有效的高性能加载程序,可以快速将数据从 Hadoop 转移至 Oracle 数据库的表中。
此加载程序可以划分数据并将其转换成 Oracle 支持的格式。
在将数据加载到表中之前它会通过主键有选择性地对记录进行排序。
加载程序可以利用 JDBC OCI Direct Path 进行在线加载,也可以通过编写可使用外部表加载的 Oracle 数据泵格式文件进行离线加载




Oracle Data Integrator ApplicationAdapter for Hadoop

OID Adapter for Hadoop

OID Adapter for Hadoop


Oracle OID工具中的大数据模块用于:
提取、转换并将大数据加载到 Oracle 数据库的分区表中,与使用图形用户界面一样简便

这是一种大数据连接器,可以使数据集成开发人员利用 Oracle Data Integrator Hadoop 内轻松集成和转换数据。
它已经预配置了 ODI 知识模块。
ODIAAH 的主要功能包括:
从本地文件系统和 HDFS 将数据加载到 Hadoop
Hadoop 内执行数据验证和转换
将经过处理的数据从 Hadoop 加载到 Oracle 以进行进一步处理并生成报告



Oracle R Connector for Hadoop
提供本地 R 环境、Oracle 数据库和 Hadoop 之间的接口
Oracle R Connector for Hadoop (ORCH) 是一种 R 软件包,可以在本地 R 环境、Oracle 数据库和 ClouderaCDH 之间提供接口。
通过使用简单的 R 功能,您可以:
抽样 HDFS 内的数据
Oracle 数据库和 HDFS 之间复制数据
编排 R 程序以作为 MapReduce 作业执行

将结果返回至 Oracle 数据库或您的笔记本电脑中

回复

使用道具 举报

上海涛德顾问学院 ( 沪ICP备14006824号 )  

GMT+8, 2018-6-20 00:19 , Processed in 0.309280 second(s), 32 queries , Gzip On.

Top Data World

回顶部