etl engine 读写hadoop生态hbase数据库原创

今天我们向大家介绍通过ETL engine。读写哈贝数据表。哈贝数据表是hidep生态当中。列式存储的一种数据表。具体存储逻辑和存储方式。我们这里不做介绍。首先我们的前置条件。模拟MYSQL数据表。创建原表t user info。目标表，User info。原表当中，我们事先准备好五条记录。模拟哈贝斯数据表。我们创建。T user info数据表。模拟的场景。我们是从MYSQL数据表user info。读出数据，写入到ho数据表to user info。

然后再从哈贝数据表读取t user info。将数据写入到MYSQL数据表的。最终效果是。哈，S数据表。当中会写入五条记录。MYSQL数据user info中写入五条记录。这是我们事先准备好的模拟环境。原表当中有五条记录。目标表是空的。我们去。哈贝当中创建一下数据表。进入到哈贝斯的控制台。

数据表已经创建完成。我们进入到管理后台。创建一个读写任务。读MYSQL。写哈贝斯。再读哈贝。写入MYSQL。为了实现先后执行的。

两个任务线。给它设置成串行。创建数据源。创建源数据。

设置一下数据类型。我们设置。输入节点。

从MYSQL当中user info读取。选择MYSQL的数据源。连接线选择原数据。输出节点，我们选择哈贝的数据源。这里我们主要配置一下。哈贝的数据表。Output fields字段。是读取数据表的。各个字段。这里面我们再设置一下。

Rookie。行健。You eat。第一个任务线我们已经设置完毕。它是从MYSQL读取数据到。下面设置读哈贝。数据表，User info。设置连线。选择原数据。写数据表。我们写到。MYSQL数据源。Insert语句。

输出的字段ID。因为哈贝斯里的。字段。跟我们MYSQL里面。创建的是一模一样。这样我们就完成了写数据表节点的配置。保存一下。当前这个任务执行完毕之后。就会将。MYSQL数据表user。写到MYSQL的user info k数据表。中间是通过hobe进行了中转。我们做运行一下。

看一下MYSQL数据库的。目标表。记录已经进来了。T user in for。Tuf k2张数据表的数据是一样的，我们再看。Howbest？记录总数。是五条。再查询一下。这是劣势显示的效果。记录也已经进来了。