阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
麻烦您将下面的代码插入您网页中,让更多的网友帮您更新网站每日SEO综合情况
-
货车用洗车机-得到消费者认可的原因是什么? -
污染的持续存在着实让人受不了,接连几天的坏天气不只让大家身体受不了,更会让大家身心很受伤。在污染的环境里生活,生活的幸福感会暴降。我想,谁都不会想生活在这样一个缺
-
深圳汽车抵押贷款押车-南联汽车抵押贷款 -
深圳汽车抵押贷款押车 ,南联汽车抵押贷款联系恒鸿雷经理:13530875815,深圳汽车抵押贷款正规办理。现在社会有很多习惯以汽车抵押来筹集资金的人们,这是一个很不错的方式。抵押
-
“苹果16英寸MacBook Pro今年10月发布 售价约3000美元” -
3d展厅价格 【科技在线】 经济日报发布的新供应链报告显示,苹果新的16英寸macbook pro笔记本电脑将于今年10月上市。 该报告称,苹果将于10月发布13英寸macbook pro和retina macbook air的更新
-
2022年春季全国糖酒会食品展区在哪个展馆 -
2022年春季全国糖酒会将于4月在中国西部国际博览城、成都世纪城新国际会展中心举办,本届展会采用双馆制,酒水和食品饮料分开办展,那么,2022年春季全国糖酒会食品展区在哪个展
-
绘本设计研修班 -
2507不锈钢板 绘本设计研修班常见问题,温馨提示:近年来取得了多项措施,获得了多项措施:提高了比赛的顺利通过的概率,学员对查漏补缺率达90%;2013年参加研修班的有关教学班学员人数在
-
初级会计考试是全国统一的吗?-题王网tiw.cn -
初级会计师 考试是全国统一的,每年举行一次,考试科目包括《经济法基础》和《初级会计实务》。参加初级资格考试的人员,在一个考试年度内通过全部科目的考试,才可获得初级资