DKhadoop是大快搜索的原生开发的纯国产商业发行版Hadoop, 基于这个发行版hadoop开发的这个智慧政务服务平台是为了解决人社大数据的问题,从而实现“智慧人社”。而一旦实现“智慧人社”,那么它所能够带来的联动效益将得以完美发挥。
分类:
其他好文 时间:
2018-06-12 12:17:49
阅读次数:
174
国内做Hadoop开发的公司以二次包装为主,做Hadoop原生态开发的至少我知道的也就是上面刚才说的大快搜索是在做的。感兴趣的可以搜索找一下大快搜索推出的国产发行版dkhadoop,应该还是可以申请拿一个玩一下的!
分类:
其他好文 时间:
2018-06-05 16:22:37
阅读次数:
132
一、前言 1. 前提 因为hbase的运行模式是伪分布式,需要用到hdfs,所以在此之前,我已经完成了hadoop-eclipse的开发环境搭建,详细看另一篇文章:hadoop开发环境部署——通过eclipse远程连接hadoop2.7.3进行开发,本篇的目的是在windows端部署开发环境,使之能 ...
分类:
系统相关 时间:
2018-06-04 00:57:49
阅读次数:
339
一、编译Hadoop插件 首先需要编译Hadoop 插件:hadoop-eclipse-plugin-2.6.0.jar,然后才可以安装使用。 第三方的编译教程:https://github.com/winghc/hadoop2x-eclipse-plugin 二、放置插件并重启Eclipse 将编 ...
分类:
系统相关 时间:
2018-05-11 20:32:03
阅读次数:
194
Hadoop是在分布式服务器集群上存储海量数据并运行分布式分析应用的一个平台,其核心部件是HDFS与MapReduce。
分类:
编程语言 时间:
2018-03-13 15:43:35
阅读次数:
231
Hadoop是一个用于部署计算密集型分布式系统的框架,最早是根据谷歌公司发表的MapReduce计算框架和GFS谷歌文件系统完成的。谷歌内部的系统跟hadoop不是同一个系统。 由于谷歌的贡献,工业界模仿开发了一些分布式应用,如HBase对应NoSQL列数据库,类似谷歌公司BigTable。Apac ...
分类:
其他好文 时间:
2018-01-07 20:14:21
阅读次数:
204
前言 搭建完hadoop集群之后在windows环境下搭建java项目进行测试 操作hdfs中的文件 版本一 以上运行测试的时候会报错,原因是URL无法识别hdfs协议。 版本二、 这个时候就可以正确的打印出hdfs文件copyFromLocal的文件内容。 附:可以将hadoop解压文件下etc中 ...
1 Eclipse-oxygen下载地址 2 上传以RHEL7.2主机上 3 解到当前目录下 4 创建一个 Gnome 启动 查看eclipse图标 5 将Hadoop插件hadoop-eclipse-plugin-2.2.0.jar上传到/hadoop/eclipse/plugins/目录下 6 ...
分类:
系统相关 时间:
2017-11-18 17:37:34
阅读次数:
477
全套视频内容包括Hadoo生态圈内容:Hive、Zookeper、HBase、Kafka、Spark、Storm,性能调优、用户行为分析等内容,包含9部分,大纲如下:├<01、走进大数据Hadoop框架的世界>│├<01、Hadoop概述>││├c677b_01_h264_sd_960_540.mp4││├c677b_02_h264_sd_960_54..
分类:
其他好文 时间:
2017-10-29 11:16:12
阅读次数:
183
0. 大数据相关预备课程 0.1 Java语言基础 0.1.1 Java OOP入门 0.1.2 Java核心编程 0.1.3 Java性能调优 0.2 Linux基础 0.2.1 Linux基础 0.3 MySQL基础 0.3.1 MySQL基础 1. Hadoop开发技术基础 1.1. LInu ...
分类:
其他好文 时间:
2017-10-07 16:19:16
阅读次数:
169