近期接到一个任务，需要改造现有从mysql往Elasticsearch导入数据MTE(mysqlToEs)小工具，由于之前采用单线程导入，千亿数据需要两周左右的时间才能导入完成，导入效率非常低。所以楼主花了3天的时间，利用java线程池框架Executors中的FixedThreadPool线程池重 ...
分类：
编程语言 时间：
2019-07-13 19:51:04
阅读次数：
106
hive 操作elasticsearch 一，从hive 表格向elasticsearch 导入数据 1，首先，创建elasticsearch 索引，索引如下 2，查看elasticsearch版本，下载相应的elasticsearch hive hadoop jar 包 可以用如下命令查看elas ...
分类：
其他好文 时间：
2018-07-24 20:01:28
阅读次数：
670
Elasticsearch一个分布式多用户能力的全文搜索引擎，基于RESTfulweb接口。ElasticSearch也支持存储，查询，排序，分页等数据库的功能。Elasticsearch的数据就存储在硬盘中。当我们的访问日志非常大时，kabana绘制图形的时候会非常缓慢。而且硬盘空间有限，不可能保存所有的日志..
分类：
其他好文 时间：
2016-08-18 21:37:22
阅读次数：
10087
