初识Java Java帝国的诞生 J2SE× J2ME× J2EE√ >服务器 Maven Tomcat Spring intellij idea Hadoop Android Java的特性和优势 简单 面向对象 可移植 高性能 分布式 动态性 多线程 安全性 Java为什么成功？ 准备+机遇 J ...
分类：
编程语言 时间：
2021-02-16 12:44:30
阅读次数：
0
参数服务器训练基本理论 参数服务器训练是分布式训练领域普遍采用的编程架构，主要解决以下两类问题： 模型参数过大：单机内存空间不足，需要采用分布式存储。 训练数据过多：单机训练太慢，需要加大训练节点,来提高并发训练速度。 如图所示，参数服务器主要包含Server和Worker两个部分，其中Server ...
分类：
其他好文 时间：
2021-02-16 11:42:24
阅读次数：
0
《Hadoop全权威指南第三版（原版）》 链接: https://pan.baidu.com/s/1O0AwkvstyRdB69Tiw8o7Ww 密码: 29li 有问题拿不到直接联系作者哦！ 大数据越来越热。Hadoop技术是大数据技术的基础。 掌握了大数据技术，就意味着可以轻松找到高薪工作。 人 ...
分类：
其他好文 时间：
2021-02-15 11:48:45
阅读次数：
0
前言 我们以javaweb为例，来搭建一个简单的电商系统，看看这个系统可以如何一步步演变。 该系统具备的功能： 用户模块：用户注册和管理 商品模块：商品展示和管理 交易模块：创建交易和管理 阶段一、单机构建网站 网站的初期，我们经常会在单机上跑我们所有的程序和软件。此时我们使用一个容器，如tomca ...
分类：
Web程序 时间：
2021-02-15 11:40:49
阅读次数：
0
在围绕Hadoop形成的大数据技术生态当中，MapReduce的地位，在早期是处于核心地位的，但是伴随着数据处理实时性需求的不断提升，更多新的计算框架出现，MapReduce的地位受到压制，但是作为Hadoop原始计算框架，还是需要相应程度的了解和掌握的。今天的大数据入门分享，我们来具体讲一讲Map ...
分类：
其他好文 时间：
2021-02-09 12:33:28
阅读次数：
0
安装Impala Impala是一个针对Apache Hadoop的开源分析数据库，可以快速返回查询响应。 按照以下步骤，通过从源码构建在集群上设置Impala。 下载最新版本。请参阅Impala下载页面以获取最新版本的链接。 检查 README.md 文件，以获得指向构建说明的指针。 请检查MD5 ...
分类：
其他好文 时间：
2021-02-06 11:41:43
阅读次数：
0
本文对Hadoop+HBase+Spark+Hive环境搭建方法和步骤进行了详细介绍和说明，记录于此，供各位同学及自己参考研究。 ...
分类：
其他好文 时间：
2021-02-05 10:38:53
阅读次数：
0
单机启动 1、获取Kafka 2、解压Kafka $ tar -xzf kafka_2.13-2.7.0.tgz $ cd kafka_2.13-2.7.0 3、启动zk（Kafka包中自带zk程序和配置文件） 配置ZK的日志路径 # Start the ZooKeeper service # No ...
分类：
其他好文 时间：
2021-02-04 12:16:31
阅读次数：
0
?## 1. Redis集群介绍 现存的问题: redis提供的服务OPS可以达到10万/秒，当前业务OPS已经达到10万/秒 单主多从,主服务器扛不住压力了 数据总量过大,内存单机容量达到256G，当前业务需求内存容量1T 使用集群的方式可以快速解决上述问题 集群就是使用网络将若干台计算机联通起来 ...
分类：
其他好文 时间：
2021-02-03 11:06:35
阅读次数：
0
备注：此处的hadoop版本是3.1.4 一、配置集群 1.1、配置yarn-site.xml <!-- Reducer获取数据的方式 --> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle ...
分类：
其他好文 时间：
2021-02-02 10:48:15
阅读次数：
0
