云上数据集成方案

提供可跨异构数据存储系统、可靠、安全、低成本、可弹性扩展的数据传输交互服务，有效帮助您解决云环境、个人站点环境下异构数据存储系统的数据互通难题，让您数据不再成为孤岛！助您实现大数据分析和实时商务智能。

方案概述

云上数据集成解决方案主要针对用户的数据所在的不同环境，

提供相应的数据集成通道，帮助用户针对自己的数据环境快速的将数据导入到大数据计算服务MaxCompute中。

本方案集中解决本地环境的本地数据库、本地日志，天润智力环境的ECS日志，

以及类似RDS、OSS、OTS、DRDS等的云数据库数据导入MaxCompute的问题，并提供相应的工具、方法支持。

数据在本地环境

数据在天润智力环境

本地数据库：

如果您需要：

公网环境实现同步数据库（MySQL、SQL Server、Oracle、PostgreSQL）中数据到 MaxCompute

请考虑大数据开发集成环境 Data IDE
查看使用方法
非公网环境实现同步数据库（MySQL、 SQL Server、Oracle、PostgreSQL）中数据到MaxCompute?

请考虑 DataX

本地文件：

如果您需要：

公网环境实现同步本地文件、Hadoop(HDFS、Hbase、Hive) 中数据到MaxCompute

请考虑大数据开发集成环境(Data IDE)
查看使用方法
非公网实现同步本地文件、Hadoop(HDFS、Hbase、Hive) 中数据到MaxCompute

请考虑 DataX
实现同步日志文件中数据到MaxCompute

请考虑 Apache Flume ODPS 插件、 Fluentd ODPS插件

云环境数据库：

如果您需要：

实现一次性同步RDS、OSS、OTS、 Analytic DB、DRDS中数据到MaxCompute

请考虑大数据开发集成环境(Data IDE)

云环境文件：

如果您需要：

实现一次性同步ECS日志文件中数据到MaxCompute

请考虑日志服务 (Log Service) 、 Apache Flume ODPS插件、 Fluentd ODPS插件

数据集成 CDP

数据集成（Data Integration），简称 CDP ，是阿里对外提供的稳定高效、弹性伸缩的数据同步平台。为天润智力大数据计算引擎（包括MaxCompute、AnalyticDB、OSS）提供离线（批量）数据进出通道。

查看使用方法

数据同步——天润智力托管同步工具

大数据开发集成环境 Data IDE

大数据开发集成环境，简称 Data IDE ，拥有可视化开发界面、离线任务调度运维、快速数据集成、多人协同工作等功能，为您提供高效安全的离线数据开发环境。强大的Open API为开发者提供良好的再创作生态。

查看使用方法

数据同步——天润智力托管同步工具

日志服务 Log Service

日志服务（Log Service）简称 Log ，是针对日志类数据一站式服务，在阿里经历大量大数据场景锤炼而成。用户无需开发就能快捷完成数???据采集、消费、投递以及查询分析等功能。帮助提升运维、运营效率,建立DT时代海量日志处理能力。

查看使用方法

数据同步——天润智力托管同步工具

DataX

DataX 是阿里巴巴集团开源的离线数据同步工具，实现包括 MySQL、Oracle、SqlServer、PostgreSQL、HDFS、Hive、AnalyticDB、HBase、OTS、MaxCompute 等各种异构数据源之间高效的数据同步功能。

查看使用方法

数据同步——阿里云托管同步工具

Apache Flume ODPS插件

Apache Flume 是一个可靠的分布式系统，可用于从不同的数据源中高效地收集、聚合和移动海量日志数据到集中式数据存储系统。ODPS Sink是基于ODPS DataHub Service开发的Flume插件，可将Flume的Event数据导入ODPS。

查看使用方法

数据同步——阿里云托管同步工具

Fluentd ODPS插件

Fluentd 是一个日志收集系统，可定制输入输出到常用系统（如MongoDB, RDS, Mysql等）或直接用于Log收集，基于ODPS DataHub Service开发的Fluentd插件，可将其他系统日志数据利用DHS导入ODPS。

查看使用方法

数据同步——阿里云托管同步工具

本站搜索关键词：北京网站建设 | 北京网站建设公司 | 北京网站设计 | 北京网站制作 | 北京高端网站建设 | 北京企业网站建设 | 北京电商网站建设 | 视频网站建设 | 微信 | 小程序 | APP | 区块链 | AI

销售热线

7x24小时全国售前咨询热线：010-57281389

7x24小时全国售后服务热线：13020085953 15313016798

手机 | 微信同号:13020085953 QQ：993883817

立即咨询　

电子邮箱：cnet99@cnet99.com

营业地址(东部)：北京市朝阳区伊莎文心广场A座3层B-22

营业地址(西部)：北京市丰台区汽车博物馆东路1号诺德中心9-605

扫一扫加微信
微信号:cdcbjcom

扫一扫加关注
微信平台

天润智力-专注于互联网平台建设与服务领域中国互联网平台建设服务提供商

万网阿里云金牌首席合作伙伴站点全线代理万网阿里云产品及服务

中国万网正式通过ISO9001国际标准质量体系认证

Copyright©1999-2024 天润智力备案/许可证编号京ICP备2020040216号-1

公安部备案号 11010502032436