一、计算机基础 CPU：大脑，处理数据，计算 内存：临时储存数据，运行速度快，成本高，断电数据会消失；4G，8G,16G,32G 硬盘：1T，固态硬盘，机械硬盘；储存数据，文件，能长久保存 操作系统：打开QQ过程，点击快捷方式，打开硬盘中的.exe文件索引，操作系统将其加载到内存，CPU将内存中的Q ...
分类：
编程语言 时间：
2019-08-31 13:16:59
阅读次数：
87
计算机与程序设计 1.根据一系列指令对数据进行处理的工具或机器 （编程语言） 2.特征： 2.1可以进行数据计算 2.2 根据指令执行任务 3.组成 3.1运算器+控制器（CPU） 3.2存储器（内存及硬盘）——>内存：临时；硬盘：永久 3.3输入设备和输出设备 4.工作过程（IPO） 4.1输入（ ...
分类：
其他好文 时间：
2019-08-27 22:45:31
阅读次数：
80
我的全栈之路-Java架构师技术栈 我的全栈之路 JavaSE篇 Java概述与开发环境搭建 Java数据存储 Java数据计算 Java程序流程控制 Java数组 Java面向对象程序设计(上) Java面向对象程序设计(中) Java面向对象程序设计(下) Java常用API 集合 泛型 异常处 ...
分类：
编程语言 时间：
2019-08-24 18:17:32
阅读次数：
108
Hadoop 中有三大组件：HDFS、MapReduce、YARN，HDFS 负责大文件存储的问题，MapReduce 负责大数据计算，而 YARN 负责资源的调度，接下来的文章我会一一介绍这几个组件。今天我们先来聊聊 HDFS 的架构及文件的读写流程。 总体架构 HDFS 设计的目的是为了存储大数 ...
分类：
其他好文 时间：
2019-08-24 16:56:05
阅读次数：
103
Python 标准库、第三方库 Python数据工具箱涵盖从数据源到数据可视化的完整流程中涉及到的常用库、函数和外部工具。其中既有Python内置函数和标准库，又有第三方库和工具。这些库可用于文件读写、网络抓取和解析、数据连接、数清洗转换、数据计算和统计分析、图像和视频处理、音频处理、数据挖掘/机器 ...
分类：
编程语言 时间：
2019-08-23 10:49:32
阅读次数：
126
5G时代，无线信号将向更高频段延伸，由于基站覆盖区域与通信频率成反比，基站密度和移动数据计算量会大幅增加
分类：
其他好文 时间：
2019-08-23 00:29:03
阅读次数：
182
为什么要有Hadoop？ 从计算机诞生到现今，积累了海量的数据，这些海量的数据有结构化、半结构化、非 结构的数据，并且这些海量的数据存储和检索就成为了一大问题。 我们都知道大数据技术难题在于一个数据复杂性、数据量、大规模的数据计算。 Hadoop就是为了解决这些问题而出现的。 Hadoop的诞生 D ...
分类：
其他好文 时间：
2019-08-20 01:15:59
阅读次数：
113
程序 = 算法 + 数据结构 对应到计算机的组成原理(硬件层面) 算法 各种计算机指令 数据结构 二进制数据 计算机用0/1组成的二进制，来表示所有信息 程序指令用到的机器码，是使用二进制表示的 存储在内存里面的字符串、整数、浮点数也都是用二进制表示的 万物在计算机里都是0和1，搞清楚各种数据在二进 ...
分类：
其他好文 时间：
2019-08-18 19:45:04
阅读次数：
85
1.随着互联网快速发展，数据量的快速膨胀，我们日增3000多亿数据量，因此需要针对PB级存储、几百TB的增量数据处理架构设计 2.系统逻辑划分总图： 暂不便透露 3.系统架构图： 4.大数据计算引擎我们是采用Apache Flink流式计算框架，并对其进行了一些优化，目前在生产环境，已经基本稳定运行 ...
分类：
其他好文 时间：
2019-08-15 12:51:51
阅读次数：
131
