
阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
百城唱响 家国同庆 左右家居与你相约幸福正当红 -
中国人自古爱红 这一抹红,存在于那新春日的春联、爆竹、剪纸里,那新婚时的盖头、花轿、喜烛上,那朱门的庄严、宫墙的尊贵、庙宇的崇敬之中,是千年时光酿成的属于中国人的浪
-
西城免联考国外mba -
西城免联考国外mba留学的证书,学费10万,北京科技大学在职研究生mba学习证书:学制两年,学费5万元,报名费200元。 北京科技大学SMBA专业学费及报名费:人民币4万,报名费200元;北京科技大学
-
seo黑帽收录(seo黑帽论坛) -
当代教育实践与教学研究 seo黑帽收录指的是seo白帽内容当网站收录不稳定时,有很多人会怀疑,网站内容为什么是不稳定的。事实上,seo黑帽SEO本质上是seo黑帽技术之一。下面来具体分析一
-
windows优化软件_windows优化软件排行 -
湖北江南售后电话 什么是Windows优化软件? Windows优化软件是一种用于改善Windows操作系统性能和提升用户体验的工具。它可以优化系统设置、清理垃圾文件、修复错误、加快启动速度等
-
二次结构泵机-机身小巧,室内施工移动方便 -
二次结构泵是一款小巧的施工设备,其机身设计紧凑,重量轻盈,使得在室内施工时可以轻松挪动。当然, 二次结构泵 不仅具有小巧的机身,还拥有强大的泵送能力,可以轻松应对各
-
primacy_primacy轮胎是什么品牌 -
不锈钢棒 什么是primacy_primacy轮胎品牌? primacy_primacy轮胎是一家享有盛誉的轮胎品牌,它在全球范围内提供高质量的轮胎产品。这个品牌以其卓越的性能、耐用性和可靠性而闻名,在市场