ambari搭建hadoop大数据平台系列3-搭建本地仓库1.官方参考https://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_ambari-installation/content/setting_up_a_local_repository_with_no_internet_access.html2.本地实例10.1.11.32localRepository-11-32下载路径：记得下..
分类：
其他好文 时间：
2017-04-05 00:01:36
阅读次数：
255
ambari搭建hadoop大数据平台系列4-配置ambari-server,分为三部分：官网:https://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_ambari-installation/content/download_the_ambari_repo_lnx7.html安装ambari-server配置ambari-server命令;ambari-serversetup启动ambari-..
分类：
其他好文 时间：
2017-04-05 00:00:50
阅读次数：
227
ambari搭建hadoop大数据平台系列6-验证测试web检查组件服务是否正常启动shell端检查服务是否健康hdfsfsck/-files-blocks-locationsjavaapi/python检查服务是否正常
分类：
其他好文 时间：
2017-04-05 00:00:04
阅读次数：
281
最近要为第三方搭建一套大数据平台，中间先进行了虚拟机版本，测试通过后，进行了物理机版本的生产环境，网上关于ambari的文章并不多，但好在ambari官方文档质量略高，社区比较活跃，便整理该系列的文档，将埋掉的坑抛出来，帮助小伙伴们更加快速的搭建自己的hadoop平台。分三..
分类：
其他好文 时间：
2017-04-04 17:54:14
阅读次数：
219
本案例搭建的环境介绍如下：Ambari2.4.2+HDP2.5（hadoop2.7；hive1.2；Tez；Spark2.0）+jdk1.8.25+centos7.0,这里首先要关注些注意事项，至于为什么会一一说明。第一部分：注意事项：版本必须低于7.2selinux必须关闭firewalld必须关闭127.0.0.1hosts该条记录删除本地仓库必须搭..
分类：
其他好文 时间：
2017-04-04 17:53:04
阅读次数：
222
Ambari是在Hadoop大数据生态圈的基础上应运而生，Ambari的架构也借助了分布式的思想，细细品味，与Hadoop分布式架构有很多相似之处。 Hadoop中单NN 与多DN的通信是借助netty封装的RPC机制实现，单Ambari server与多Agent通信则是基于restful api ...
分类：
其他好文 时间：
2017-03-24 22:44:41
阅读次数：
281
数据挖掘——推荐系统大数据可以认为是许多数据的聚合，数据挖掘是把这些数据的价值发掘出来，比如有过去10年的气象数据，通过数据挖掘，几乎可以预测明天的天气是怎么样的，有较大概率是正确的。机器学习是人工智能的核心，对大数据进行发掘，靠人工肯定是做不来的，那就得靠..
分类：
其他好文 时间：
2017-03-15 19:22:32
阅读次数：
346
通过前面的学习，大家已经了解了HDFS文件系统。有了数据，下一步就要分析计算这些数据，产生价值。接下来我们介绍Mapreduce计算框架，学习数据是怎样被利用的。Mapreduce计算框架如果将Hadoop比做一头大象，那么MapReduce就是那头大象的电脑。MapReduce是Hadoop核心编程模型。..
分类：
其他好文 时间：
2017-03-07 14:19:51
阅读次数：
432
Hadoop大数据公开课招募啦~~~赵强老师免费公开课l时间：2017年03月14号晚19:30-21:00n19:30-20:30讲述Hadoop的背景知识，包括：大数据背景、数据仓库、Hadoop的思想来源（Google的三大思想）n20:30-21:00答疑l讲师简介13年IT行业从业经历，清华大学计算机硕士，曾在BEA、甲骨文..
分类：
其他好文 时间：
2017-02-14 22:56:12
阅读次数：
564
前言 做大数据相关的后端开发工作一年多来,随着Hadoop社区的不断发展,也在不断尝试新的东西,本文着重来讲解下Ambari,这个新的Apache的项目,旨在让大家能够方便快速的配置和部署Hadoop生态圈相关的组件的环境,并提供维护和监控的功能. 作为新手,我讲讲我自己的学习经历,刚刚开始学习的时 ...
分类：
其他好文 时间：
2017-02-08 10:35:16
阅读次数：
570
