一. 计算机了解 计算机俗称电脑,可以进行数值运算和逻辑运算,还有存储数据的功能,还可以按照程序运行,自动,高速的完成处理海量数据的电子设备。计算机从始至终都是想要发展成取代人脑的能力。 二. 计算机发展 早期计算机的发展: 数指头,结绳记事,算盘,帕斯卡发明的手表算法,发明微积分的莱布尼茨(牛顿齐 ...
分类:
其他好文 时间:
2018-04-21 12:46:09
阅读次数:
193
众所周知,java在处理数据量比较大的时候,加载到内存必然会导致内存溢出,而在一些数据处理中我们不得不去处理海量数据,在做数据处理中,我们常见的手段是分解,压缩,并行,临时文件等方法; 例如,我们要将数据库(不论是什么数据库)的数据导出到一个文件,一般是Excel或文本格式的CSV;对于Excel来 ...
分类:
数据库 时间:
2018-04-18 11:46:31
阅读次数:
857
###01.01_计算机基础知识(计算机概述)(了解)* A:什么是计算机?计算机在生活中的应用举例 * 计算机(Computer)全称:电子计算机,俗称电脑。是一种能够按照程序运行,自动、高速处理海量数据的现代化智能电子设备。由硬件和软件所组成,没有安装任何软件的计算机称为裸机。常见的形式有台式计 ...
分类:
编程语言 时间:
2018-04-12 23:34:30
阅读次数:
248
今天闲逛一下求职要求,自己早在半年前就已经下定义了一个目标:大数据工程师 既然这样,就定点技术大方向要求吧~ ,不断加油不断努力ing 工作要求: 1、负责公司大数据分析平台的搭建,处理海量数据;2、负责数据模型的制定和实现;3、负责数据清洗和过滤、特征抽取、参数选择、算法实验、效果分析;4、负责数 ...
分类:
其他好文 时间:
2018-04-11 11:45:51
阅读次数:
132
处理海量数据是大数据工程师必备技能,通过对PB级别的数据进行挖掘与分析发掘出有价值的信息,为企业或政府做出正确决策提供依据,是十分必要的一项工作,以下是常用的海量数据处理方法!1. Bloom filter Bloom filter是一种二进制向量数据结构,具有很好的空间效率和时间效率,可用来检测一个元素是否属于一个集合。该方法的优点是它的插入和查询时间都是常数
分类:
其他好文 时间:
2018-03-23 19:24:33
阅读次数:
226
处理海量数据是大数据工程师必备技能,通过对PB级别的数据进行挖掘与分析发掘出有价值的信息,为企业或政府做出正确决策提供依据,是十分必要的一项工作
分类:
数据库 时间:
2018-03-23 14:47:24
阅读次数:
312
一、什么是计算机? 计算机(computer)俗称电脑,是现代一种用于高速计算的电子计算机器,可以进行数值计算,又可以进行逻辑计算,还具有存储记忆功能,是能够按照程序运行,自动、高速处理海量数据的现代化智能电子设备。 程序自动化:可以将预先编好的程序组纳入计算机内存,在程序控制下,计算机可以连续、自 ...
分类:
其他好文 时间:
2018-03-19 22:16:43
阅读次数:
209
计算机的定义 计算机(computer)俗称电脑,是现代一种用于高速计算的电子计算机器,可以进行数值计算,又可以进行逻辑计算,还具有存储记忆功能。是能够按照程序运行,自动、高速处理海量数据的现代化智能电子设备。 1、 完整的计算机系统: 应用程序 操作系统 计算机硬件 2、 计算机硬件:(计算机是人 ...
分类:
其他好文 时间:
2018-03-17 16:50:33
阅读次数:
174
今天和大家分享一下有关计算机的基础知识 首先计算机是什么? 计算机(computer)俗称电脑,是现代一种用于高速计算的电子计算机器,可以进行数值计算,又可以进行逻辑计算,还具有存储记忆功能。是能够按照程序运行,自动、高速处理海量数据的现代化智能电子设备。 那么计算机是由哪些东西组成的呢?请看下图 ...
分类:
其他好文 时间:
2018-02-27 01:15:56
阅读次数:
147
最近一段时间由于工作需要,开始关注针对Mysql数据库的select查询语句的相关优化方法。由于在参与的实际项目中发现当mysql表的数据量达到百万级时,普通SQL查询效率呈直线下降,而且如果where中的查询条件较多时,其查询速度简直无法容忍。曾经测试对一个包含400多万条记录(有索引)的表执行一 ...
分类:
数据库 时间:
2018-02-23 18:59:24
阅读次数:
180