阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
second是什么意思翻译_second是什么意思翻译中文翻译 -
Second是什么意思? Second这个词在英语中有多个含义和用法。它可以作为名词、形容词、副词和动词出现,具体含义取决于上下文。下面将介绍几种常见的用法和意思。 1. 名词用法 作为
-
国际腾讯云实名账号代充:云服务器的功能与优势 -
国际腾讯云云服务器的功能与优势-国际腾讯云代充 国际阿里云代理 实名账号出售/代充 业务办理: 国际阿里云、华为云、腾讯云、谷歌云、亚马逊云、微软云、短信签名验证码、棋牌
-
设计学科精英研修班 -
百科知识 设计学科精英研修班的基本目的来自于艺术界、艺术界及相关家的事物,围绕实现艺术品的过程和方法、从艺术品、视觉、过程等方面,对艺术品的传承、变革和发展进行详细思
-
硕士免联考课程 -
免年费信用卡申请 硕士免联考课程:一般来说,法律硕士允许报名。 法学硕士满5年,主要以考法律硕士专业基础知识与基本技能,学位证书原件及复印件一份。 所获得的证书的学位不是很
-
smt智能货架如何实现智能仓储?_佰斯特POUSTO -
SMT 智能货架 是一种基于物联网、大数据和人工智能技术的智能仓储解决方案。 通过集成各种传感器、计算设备和软件系统,实现对货物的自动化管理和智能化操作,以下是智能货架如
-
抖音推广软件自动引流是怎么实现的? -
在这个数字化时代,谁掌握了流量,谁就能笑傲江湖。神秘的 抖音推广 软件,它们声称能自动引流,让你的抖音账号人气爆棚。这些抖音推广软件到底是怎么自动起来的? 这世上没有