大数 据 主要 具有 四方 面的 典型 特征—— 规模 性( Volume)、 多样性( Variety)、 高速 性( Velocity) 和 价值 性( Value), 即 所谓 的" 4V"。 大数据时代的关键技术:(1) 大数 据 采集 技术(2) 大 数据 预处理 技术(3) 大数 据 存... ...
分类:
其他好文 时间:
2019-05-03 18:46:39
阅读次数:
288
小结: 1、 https://mp.weixin.qq.com/s/4rkgisFRJxokXZ4lyFXujw 京东JDK在大数据平台的探索与研究 臧琳 亿级流量网站架构 3月11日 ...
分类:
数据库 时间:
2019-04-26 14:51:55
阅读次数:
219
J 为了满足日益增长的业务变化,京东的京麦团队在京东大数据平台的基础上,采用了hadoop等热门的开源大数据计算引擎,打造了一款为京东运营和产品提供决策性的数据类产品-北斗平台。 一、Hadoop的应用业务分析 大数据是不能用传统的计算技术处理的大型数据集的集合。它不是一个单一的技术或工具,而是涉及 ...
分类:
其他好文 时间:
2019-04-23 15:43:25
阅读次数:
177
编者按:本文是松子(李博源)的大数据平台发展史系列文章的第二篇(共四篇),本系列以独特的视角,比较了非互联网和互联网两个时代以及传统与非传统两个行业。是对数据平台发展的一个回忆,对非互联网、互联网,从数据平台的用户角度、数据架构演进、模型等进行了阐述。 前言,”数据模型“ 这个词只要是跟数据沾边就会 ...
分类:
其他好文 时间:
2019-04-11 14:36:31
阅读次数:
132
编者按:本文是松子(李博源)的大数据平台发展史系列文章的第二篇(共四篇),本系列以独特的视角,比较了非互联网和互联网两个时代以及传统与非传统两个行业。是对数据平台发展的一个回忆,对非互联网、互联网,从数据平台的用户角度、数据架构演进、模型等进行了阐述。 前言,本篇幅将进入大家熟知的互联网时代,数据平 ...
分类:
其他好文 时间:
2019-04-11 14:32:55
阅读次数:
129
编者按:本文是松子(李博源)的大数据平台发展史系列文章的第四篇(共四篇),本系列以独特的视角,比较了非互联网和互联网两个时代以及传统行业与非传统行业。是对数据平台发展的一个回忆,对非互联网、互联网,从数据平台的用户角度、数据架构演进、模型等进行了阐述。 在互联网时代被弱化的数据模型 谈起数据模型就不 ...
分类:
其他好文 时间:
2019-04-11 14:28:53
阅读次数:
133
 04,创建用户(ALL) 05,内核参数修改(ALL) 06.打开数限 ...
分类:
其他好文 时间:
2019-03-13 12:21:29
阅读次数:
461
立的大数据实验室中,绝大多数采用产学研结合模式——高校与企业共建,在此浪潮中高校成为了国家大数据实验室的重要参与者,同时很多高校开设了大数据专业,大数据平台成为高校教育和科研的重要手段。那么,什么样的大数据平台能够满足高校建立大数据实验室,满足专业师生的教学、科研、实验等相关需求?具备快速交付大数据基础硬件环境的能力;面对教学实战中的多种大数据环境要求,具备按需部署、构建交付组合多样的大数据软件环
分类:
其他好文 时间:
2019-02-21 20:17:59
阅读次数:
224
阅读本文大概需要 2.8 分钟。 阅读本文大概需要 2.8 分钟。 阅读本文大概需要 2.8 分钟。 阅读本文大概需要 2.8 分钟。 来源:http://t.cn/E2TbCg5 一、需求 一个朋友接到一个需求,从大数据平台收到一个数据写入在20亿+,需要快速地加载到MySQL中,供第二天业务展示 ...
分类:
数据库 时间:
2019-02-17 00:40:54
阅读次数:
205