Snippet 博客主题

大数据场景学习

大数据场景学习之实时更新HBase数据库(三)

一.业务场景 从Kafka中读取数据,并进行一定的加工 利用phoenix将加载的数据更新到HBase中 二.开发环境 MySQL hive-2.1.1 hadoop-2.7.2 spark-2.1.0-bin-hadoop2.7 hbase-1.2.5 kafka-2.12 phoenix-4.10…

大数据场景学习之Hive与HBase(二)

一.业务场景 从Hive中加载数据,并进行一定的加工 将加载的数据更新到HBase中 二.开发环境 MySQL hive-2.1.1 hadoop-2.7.2 spark-2.1.0-bin-hadoop2.7 hbase-1.2.5…

大数据场景学习之Hive与关系数据库(一)

一.业务场景 从关系数据库中获取任务信息 根据从数据库中的任务信息,从Hive中过滤满足条件的数据 将数据加载到回关系数据库中 二.开发环境 MySQL hive-2.1.1 hadoop-2.7.2 spark-2.1.0-bin-hadoop2.7…