第一周-Linux基础命令和帮助Unix历史:1965前后multics,贝尔实验室,麻省理工,通用电气发起。1969Unix雏形UNICS,KenThompson汇编语言B语言1973正式命名为UnixDennisRitchieC语言1977BSDBerkeleySoftwareDistribution伯克利大学1979SystemV架构版权声明HP-UNIXIBMAIX“不对学生提供源码”收回
分类:
系统相关 时间:
2020-02-20 22:03:14
阅读次数:
80
Spark最初由美国加州伯克利大学的AMP实验室于2009年开发,是基于内存计算的大数据并行计算框架,可用于构建大型的、低延迟的数据分析应用程序。 Spark特点Spark具有如下几个主要特点: 运行速度快:Spark使用先进的DAG(Directed Acyclic Graph,有向无环图)执行引 ...
分类:
其他好文 时间:
2020-02-11 13:16:04
阅读次数:
109
今天的学习主要是了解spark生态体系以及观看了子雨大数据之Spark入门教程(Scala版)的介绍,现将对spark的初步了解以及日后可能会用到的一些知识总结如下: 一、spark简介 Spark是加州大学伯克利分校AMP实验室(Algorithms, Machines, and People L ...
分类:
其他好文 时间:
2020-02-02 01:33:35
阅读次数:
93
今天我主要了解了spark的一些专业名词以及相关特点: spark简介: 最初由美国加州伯克利大学的AMP实验室于2009年开发,是基于内存计算的大数据计算框架,可用于构建大型,低延迟的数据分析应用程序 2014年打破了hadoop保持的基准排序记录 Spark具有以下特点: 运行速度快:使用DAG ...
分类:
其他好文 时间:
2020-01-31 20:45:10
阅读次数:
107
官网介绍 什么是Spark 官网地址:http://spark.apache.org/ Apache Spark? 是用于大规模数据处理的统一分析引擎。 从右侧最后一条新闻看,Spark也用于AI人工智能。 spark是一个实现快速通用的集群计算平台。它是由加州大学伯克利分校AMP实验室 开发的通用 ...
分类:
其他好文 时间:
2020-01-26 19:08:26
阅读次数:
75
写在前面 10 年前(2009 年),UC Berkeley 在 2 月 10 日发布了一篇关于 Cloud Computing 的论文,在 10 年后的今天看来,仍颇具启发性 Cloud Computing is likely to have the same impact on software ...
分类:
其他好文 时间:
2020-01-15 09:55:59
阅读次数:
80
1、套接字概述 1.1、套接字定义 套接字最早是由BSD(伯克利软件套件)在1982年引入的通信机制,目前已被广泛移植到主流的操作系统中。 对于应用开发人员来说,套接字(socket)是一个抽象层,是一种特殊的I/O接口,也是一种文件描述符。应用程序可以通过它发送或接收数据,可对其进行像对文件一样的 ...
分类:
其他好文 时间:
2020-01-06 00:37:29
阅读次数:
217
一.简介 1.什么是spark Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行计算框架,Spark拥有Hadoop MapReduc ...
分类:
其他好文 时间:
2019-12-30 14:10:45
阅读次数:
100
Spark Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同 ...
分类:
其他好文 时间:
2019-12-27 00:11:15
阅读次数:
106
一、初识socket socket(套接字)起源于20世纪70年代加利福尼亚大学伯克利分校版本的Unix,即人们所说的BSDUnix。因此,有时人们也把套接字称为“伯克利套接字”或“BSD套接字”。一开始,套接字被设计用在同一台主机上多个应用程序之间的通讯。这也被称进程间通讯,或IPC。socket ...
分类:
其他好文 时间:
2019-12-18 00:13:07
阅读次数:
127