Avatar notebook default
9篇文章 · 11926字 · 2人关注
  • DataX系列10-DataX优化

    一. DataX优化概述 当觉得DataX传输速度慢时,需要从上述四个方面着手开始排查。 网络本身的带宽等硬件因素造成的影响; DataX本身的...

  • DataX系列9-DataX同步案例

    一. MySQL同步到Hive 1.1 MySQL数据准备 MySQL测试数据准备[https://blog.csdn.net/u0105207...

  • DataX系列7-HdfsReader介绍

    一. 快速介绍   HdfsReader提供了读取分布式文件系统数据存储的能力。在底层实现上,HdfsReader获取分布式文件系统上文件的数据...

  • Resize,w 360,h 240
    DataX系列6- MysqlWriter介绍

    一. 快速介绍   MysqlWriter 插件实现了写入数据到 Mysql 主库的目的表的功能。在底层实现上, MysqlWriter 通过 ...

  • DataX系列5- MysqlReader介绍

    一. 快速介绍   MysqlReader插件实现了从Mysql读取数据。在底层实现上,MysqlReader通过JDBC连接远程Mysql数据...

  • Resize,w 360,h 240
    DataX系列4-TxtFileWriter介绍

    一. 快速介绍   实际生产中,鉴于数据安全、不同够公司数据交互等原因,很多时候会使用txt、csv等文件格式来交互数据。   TxtFileW...

  • DataX系列3-TxtFileReader介绍

    一.快速介绍   实际生产中,鉴于数据安全、不同够公司数据交互等原因,很多时候会使用txt、csv等文件格式来交互数据。   TxtFileRe...

  • Resize,w 360,h 240
    DataX系列2- 安装DataX

    一.系统要求 Linux JDK(1.8以上,推荐1.8) Python(推荐Python 2.6.x) Apache Maven 3.x(编译...

  • Resize,w 360,h 240
    DataX系列1-DataX介绍

    一. DataX 概述   DataX 是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hiv...

文集作者