景航大数据技术之Linux 第1章 Linux入门 1.1 概述 1.1.1 操作系统(科普) l 没有安装操作系统的计算机，通常被称为 裸机 l 如果想在 裸机 上运行自己所编写的程序，就必须用机器语言书写程序 l 如果计算机上安装了操作系统，就可以在操作系统上安装支持的高级语言环境，用高级语言开 ...
分类：
系统相关 时间：
2020-02-16 20:33:18
阅读次数：
121
2020.2.2今天的寒假生活学习了了解Spark 内存计算框架.Hadoop使用数据复制来实现容错性，而Spark使用RDD数据存储模型来实现数据的容错性。 了解了 hadoop框架 中的 HDFS（分布式文件系统） Mapreduce（分布式计算框架） map函数 Reduce （函数） YAR ...
分类：
其他好文 时间：
2020-02-02 21:55:13
阅读次数：
73
学习于林子雨《大数据技术原理与应用》教材配套大数据软件安装和编程实践指南 一. 安装spark 第一步，spark下载（http://spark.apache.org/downloads.html） 第二步，spark压缩包解压 sudo tar -zxf ~/下载/spark-1.6.2-bin- ...
分类：
其他好文 时间：
2020-02-01 23:24:39
阅读次数：
75
现在无人不谈“大数据技术”和“人工智能技术”，而商业智能和机器学习等应用的具体开发中又大量使用Python程序设计语言，用Python语言来描述算法和讲述数据结构就成为顺其自然的事情了。 “数据结构”毫无疑问是计算机科学既经典又核心的课程之一，只要从事计算机相关的开发工作，系统地学习数据结构是进入这 ...
分类：
编程语言 时间：
2020-01-31 19:18:51
阅读次数：
312
随着国内利率市场化加快推进、经济增速放缓、国民收入和财富逐步上升，零售业务对银行收入及利润的贡献日益见长，科学有效地引领零售业务持续增长已成为国内领先银行的首要任务。然而，零售客户的需求日趋复杂和个性化，市场竞争愈加激烈。在此背景下，应该有效利用大数据技术将决策方从“业务经验驱动”向“数据量化驱动”转型，决策模式的变化将成为各家银行互争雄长的制胜关键。最近几年银行零售业务受到了多方面环境变化和监管
分类：
其他好文 时间：
2020-01-16 12:50:15
阅读次数：
96
大数据挖掘技术在电网状态监测与诊断中的应用 吴振扬（ 国网吉林省电力有限公司 , 吉林 长春 130000）[ 摘要 ] 大数据是目 前国内外各个领域的一个研究应用热点。 本文基于大数据技术， 阐述了 大数据技术对于电网发展的重要意义，大数据挖掘技术的发展状况； 分析了 大数据挖掘技术的几种算法特点 ...
分类：
其他好文 时间：
2020-01-15 19:50:43
阅读次数：
71
微信协议就是基于微信IPad协议的智能控制系统，利用人工智能AI技术、云计算技术、虚拟技术、边缘计算技术、大数据技术，打造出智能桌面系统RDS 、 智能聊天系统ACS 、智能插 件系统PLUGIN 、云计算服务CCS 、 任务管理系统 TM 、设备管理服务DM、 应用管理系统AM、 统一 好友系统U ...
分类：
其他好文 时间：
2020-01-09 13:22:23
阅读次数：
243
HDFS架构概述 HDFS（Hadoop Distributed File System）的架构 2.5.3 MapReduce架构概述 MapReduce将计算过程分为两个阶段：Map和Reduce，如图2-25所示 1）Map阶段并行处理输入数据 2）Reduce阶段对Map结果进行汇总 图中涉 ...
分类：
其他好文 时间：
2019-12-27 21:42:53
阅读次数：
71
简介： 大数据自 2009 年走向人们的视野，亦如所有新技术的发展，经历了一波炒作后，由风口回归理性发展。我们可以看到，随着 IOT 技术的发展和成熟，以及 5G 业务的全面铺开，数据规模还将持续增长。新晋技术风口 AI、区块链、RPA 的发展也都离不开大数据技术。大数据技术将作为一项基础技术，应用 ...
分类：
其他好文 时间：
2019-12-24 18:22:06
阅读次数：
191
4.1概述 1. HBase是一个高可靠、高性能、面向列、可伸缩的分布式数据库，是谷歌BigTable的开源实现，主要用来存储非结构化和半结构化松散数据。 2. HBase与传统数据库的区别 数据类型上的区别，它把数据存储为未经解释的字符串 数据操作，没有像关系型数据库那样的复杂数据操作，通常采用单 ...
分类：
数据库 时间：
2019-12-23 00:30:13
阅读次数：
151
