寒假 2

标签：reduce   协议   mapr   数据存储   实现   大数据技术   文件   bsp   分布式文件系统   

2020.2.2今天的寒假生活学习了了解Spark 内存计算框架.Hadoop使用数据复制来实现容错性，而Spark使用RDD数据存储模型来实现数据的容错性。

了解了 hadoop框架 中的 HDFS（分布式文件系统） Mapreduce（分布式计算框架） map函数 Reduce （函数） YARN（集群资源管理器） Zookeeper（分布式协议服务） Ambari（管理工具）

Spark（内存计算框架） 编写Spark框架的Scala  SparkSQL Spark Streaming

通过《大数据技术入门》一书进行的学习

寒假 2

标签：reduce   协议   mapr   数据存储   实现   大数据技术   文件   bsp   分布式文件系统   

原文地址：https://www.cnblogs.com/yang-qiu/p/12253621.html