大数据平台基础框架是很多初学者必然要掌握的内容,大数据太过抽象,有时候写分享的时候难免感觉写的很多困难。还是通过具体的案例来写会比较好理解。关于大数据平台基础框架我还是用自己熟悉的DKhadoop为例。 ...
分类:
其他好文 时间:
2018-05-15 12:19:45
阅读次数:
165
原文地址:https://www.cnblogs.com/R-bear/p/7022231.html python DB-API介绍 1.python标准数据库接口为 python DB-API,python DB-API为开发人员提供了数据库应用标称接口 2.python数据库接口支持非常多的数据 ...
分类:
数据库 时间:
2018-05-10 15:41:17
阅读次数:
170
导航: 原理介绍 代码实现 过程分析 追踪Cookie 原理介绍 session简介 session是保存在服务上的一个键值对。当用户登陆成功之后,服务器产生session,分别是key和value。key发送给浏览器,当浏览器访问服务器时携带key,服务器判断key从而能知道登陆者的身份。 一个人 ...
分类:
Web程序 时间:
2018-05-08 17:33:52
阅读次数:
250
转载自:http://bigdata.chinabyte.com/311/13871811.shtml数据湖听起来很简单:把数据或信息汇集到一个结合处理速度和存储空间的大数据系统――Hadoop集群或内存解决方案,那样业务部门就能访问数据,获取新的洞察力。不过,与IT行业的许多技术一样,现实比梦想困... ...
分类:
其他好文 时间:
2018-05-04 15:31:54
阅读次数:
256
SQA计划: SQA计划包括质量控制、质量保证、数据收集和统计报告、数据分析五个部分。 本次设计的SQA计划主要是为了完成图书馆系统的各个阶段,保证整个系统各各个环节正常运行。 计划进度: |任务 |时间 |结果 |完成度| | | | : | :| |图书归还|\ 17年10月 17年11月| 未 ...
分类:
其他好文 时间:
2018-04-29 01:17:18
阅读次数:
180
导语:如果说算法和数据是跑车的发动机和汽油,那么系统则是变速箱,稳定而灵活的变速箱,是图像识别服务向前推进的基础。算法、数据、系统三位一体,随着算法的快速发展和数据的日益积累,系统也在高效而稳定地升级。
分类:
其他好文 时间:
2018-04-23 13:18:57
阅读次数:
295
1. HDFS的基本概念和特性 设计思想——分而治之:将大文件、大批量文件分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析。在大数据系统中作用:为各类分布式运算框架(如:mapreduce,spark,tez,....)提供数据存储服务。 1.1 HDFS的概念 首先,它是一 ...
分类:
其他好文 时间:
2018-04-07 11:15:58
阅读次数:
281
从2012年开始,几乎人人(至少是互联网界)言必称大数据,似乎不和大数据沾点边都不好意思和别人聊天。从2016年开始,大数据系统逐步开始在企业中进入部署阶段,大数据的炒作逐渐散去,随之而来的是应用的蓬勃发展期,一些代表成熟技术的标志性IPO在国内外资本市场也不断出现。转眼间,大数据几年前经历的泡沫正在无可争议地转移到人工智能身上。可以说,在过去的一年,AI所经历的共同意识“大爆炸”与当年的大数据相
分类:
其他好文 时间:
2018-04-03 12:45:55
阅读次数:
136
分区类型 1.主分区 一块硬盘最多分为4个主分区,主分区不可再划分为更小单位的分区.主分区可以用来启动操作系统,直接创建文件系统存放数据. 2.扩展分区 不能创建文件系统,可以再划分为更小单位的分区(逻辑分区) 3.逻辑分区 可以创建文件系统来存储数据 4.系统分区 用来启动操作系统的分区,内核启动 ...
分类:
其他好文 时间:
2018-03-30 13:18:27
阅读次数:
151