以下对RDD的三种创建方式、单类型RDD基本的transformationapi、采样Api以及pipe操作进行了javaapi方面的阐述一、RDD的三种创建方式从稳定的文件存储系统中创建RDD，比如localfileSystem或者hdfs等，如下：//从hdfs文件中创建
JavaRDD<String>textFileRDD=sc.textFile("hd..
分类：
编程语言 时间：
2017-09-18 10:53:03
阅读次数：
264
一、模块概览模块名称作用主要类反射模块封装JAVAAPI，易用，进行了缓存优化类型转换模块绑定实参及映射查询结果集日志模块定位BUG，解决瓶颈资源加载模块类加载器，确定类加载器使用顺序解析器模块Xpath，初始化解析mybatis-confg.xml,mapper.xml,动态SQL占位符XPathParserTok..
分类：
其他好文 时间：
2017-09-17 18:55:55
阅读次数：
186
我们大家都知道，kafka消费者在会保存其消费的进度，也就是offset，存储的位置根据选用的kafka api不同而不同。 首先来说说消费者如果是根据javaapi来消费，也就是【kafka.javaapi.consumer.ConsumerConnector】，我们会配置参数【zookeeper ...
分类：
其他好文 时间：
2017-08-22 20:14:27
阅读次数：
14996
ELK是Elasticsearch、Logstash、Kibana的简称，这三者是核心套件，但并非全部。Elasticsearch是实时全文搜索和分析引擎，提供搜集、分析、存储数据三大功能；是一套开放REST和JAVAAPI等结构提供高效搜索功能，可扩展的分布式系统。它构建于ApacheLucene搜索引擎库之上。Logstas..
分类：
其他好文 时间：
2017-08-16 23:01:32
阅读次数：
201
ELK是Elasticsearch、Logstash、Kibana的简称，这三者是核心套件，但并非全部。Elasticsearch是实时全文搜索和分析引擎，提供搜集、分析、存储数据三大功能；是一套开放REST和JAVAAPI等结构提供高效搜索功能，可扩展的分布式系统。它构建于ApacheLucene搜索引擎库之上。Logstas..
分类：
其他好文 时间：
2017-08-14 22:27:33
阅读次数：
199
Elasticsearch的javaAPI之query dsl-queries 和rest query dsl一样，elasticsearch提供了一个完整的Java query dsl。 查询建造者（factory）是 QueryBuilders 。 一旦准备好您的查询,您能够使用query ap ...
分类：
编程语言 时间：
2017-08-04 16:45:38
阅读次数：
196
什么是JMS？ Java消息服务（Java Message Service），即JMS，是一个java平台中关于面向消息中间件的API，用于在两个应用程序之间，或分布式系统中发送消息，进行异步通信。 定义：JavaAPI 评价：JMS定义了JavaAPI 层面的标准；在Java体系中，多个clien ...
分类：
其他好文 时间：
2017-07-29 20:25:26
阅读次数：
185
目前处理Excel的开源javaAPI主要有两种，一是Jxl（Java Excel API）,Jxl只支持Excel2003以下的版本。另外一种是Apache的Jakarta POI,相比于Jxl,POI对微软办公文档的支持更加强大，但是它使用复杂，上手慢。POI可支持更高的Excel版本2007。 ...
分类：
其他好文 时间：
2017-07-19 23:20:35
阅读次数：
204
本文主要讲解:JDBC的概念JDBC的原理创建用于测试的数据库使用JDBC操作数据库思考与分析关于JDBCJDBC（JavaDataBaseConnectivity,java数据库连接）是一种用于执行SQL语句的JavaAPI。JDBC是Java访问数据库的标准规范，可以为不同的关系型数据库提供统一访问，它由一组用Java语言..
分类：
数据库 时间：
2017-07-16 00:51:14
阅读次数：
351
摘要：Hadoop之HDFS文件操作常有两种方式。命令行方式和JavaAPI方式。本文介绍怎样利用这两种方式对HDFS文件进行操作。 关键词：HDFS文件 命令行 Java API HDFS是一种分布式文件系统，为MapReduce这样的框架下的海量数据分布式处理而设计。 Hadoop之HDFS文件 ...
分类：
其他好文 时间：
2017-07-14 21:18:43
阅读次数：
261
