@ 1.Docker概述 1.1Docker为什么会出现 一款产品：开发--》上线，需要两套环境！应用环境，应用配置！ 开发 运营之间产生问题：我在我的电脑上可以运行！版本更新导致服务不可用！对于运维就很难 开发即运维！ 环境配置十分麻烦，每一个机器都要部署环境（集群Redis、ES、Hadoop。 ...
分类：
其他好文 时间：
2020-11-21 12:47:24
阅读次数：
31
1. Es-Hadoop异常： org.elasticsearch.hadoop.EsHadoopException: Could not write all entries [615/300864] (maybe ES was overloaded?). Bailing out... at org ...
分类：
其他好文 时间：
2018-08-28 23:56:52
阅读次数：
1510
大数据方兴未艾，Hive在业界，是大数据的标配了。因此hive数据添加到ES的应用场景还是比较常见的。学习ES官方的es-hadoop,有从hive导数据到ES.实验可行。hive的版本：hive-1.1.0-cdh5.9.0具体的步骤如下：step1将elasticsearch-hadoop-hive-version.jar添加到hivewgethttps://artifacts.elastic
分类：
其他好文 时间：
2018-07-01 23:04:27
阅读次数：
460
看了下es-hadoop插件的源码：发现ES导入数据重试情况的发生，除了在es.batch.write.retry.policy参数默认开启且es-hadoop插件向ES集群发送不bulk写入请求接受到503响应码会重试3次室外。本身执行http请求时，也会存在重试（hadoop/rest/NetworkClient.java）：publicResponseexecute(Requestreque
分类：
其他好文 时间：
2018-05-15 17:48:03
阅读次数：
527
如果我们想展示hive中的数据,则可以使用Kibana展示工具,而在这之前需要把hive表数据导入到es中,这就用到了ES-Hadoop插件.
插件安装:
下载地址：https://github.com/elasticsearch/elasticsearch-hadoop#readme
add上面的jar包到hive
hive –e “add jar elasticsear...
分类：
其他好文 时间：
2016-05-06 16:26:46
阅读次数：
1039
Es查询的时候默认是随机从一些分片中查询数据，可以通过配置让es从某些分片中查询数据1：_local指查询操作会优先在本地节点有的分片中查询，没有的话再在其它节点查询。2：_primary：指查询只在主分片中查询3：_primary_first：指查询会先在主分片中查询，如果主分片找不到（挂..
分类：
其他好文 时间：
2015-05-29 18:30:50
阅读次数：
153
explore your hadoop data and get real-time results 深度api集成使你大数据访问更加容易...
分类：
其他好文 时间：
2014-10-13 14:03:19
阅读次数：
271
