架构智慧
elasticsearch
离线计算

hive数据导入elasticsearch

本文将详细介绍利用 ES 与 Hive 直接的数据交互;通过 Hive 外部表的方式,可以快速将hive数据导入到 elasticsearch 中,不需要编写代码只需要 Hive SQL 实现对数据的ETL 一、开发环境 1、组件版本 CDH 集群版本:6.3.2 ES 版本:7.7.0 Hive 版本:2.1.1 ES-Hadoop 版本:7.7.0 2、配置Hive 支持 ES-Hadoop 一共有四个方法可以配置,可以任选一个进行安装配置 (1)使用 add jar 在hive命令行或者hive s…

2020年08月21日 0条评论 1070点热度 3人点赞 阅读全文
分类目录
  • 大数据浪潮 (2)
  • 实时数仓 (1)
  • 实时计算 (6)
  • 离线计算 (4)
2023年3月
一 二 三 四 五 六 日
 12345
6789101112
13141516171819
20212223242526
2728293031  
« 7月    
文章归档
  • 2021年7月 (2)
  • 2020年9月 (4)
  • 2020年8月 (4)
  • 2020年7月 (2)
  • 2020年6月 (1)
标签聚合
hive elasticsearch kafka spark 实时计算 窗口函数 flink dataframe
友情链接
  • 大数据导航
  • 网站地图
  • 隐私政策

COPYRIGHT © 2020 架构智慧. ALL RIGHTS RESERVED.

THEME KRATOS MADE BY VTROIS

京ICP备19056408号