码迷,mamicode.com
首页 >  
搜索关键字:大数据基础    ( 95个结果
物理网大数据基础架构研发+智能家居应用场景
平台介绍 平台简介 智能平台的主要功能如下: 智能家居基础架构平台定位于PaaS\DaaS服务的兼顾。 下面具体介绍一下我们如何定位PaaS服务的: 在物联网应用和真实设备之间搭建高效、稳定、安全的应用平台:面向设备,适配多种网络环境和常见传输协议,提供各类硬件终端的快速接入方案和设备管理服务;面向 ...
分类:其他好文   时间:2019-07-21 10:47:18    阅读次数:175
大数据基础学习
什么是大数据?举例:1、商品推荐:问题:(1)大量的订单如何存储?(2)大量的订单如何计算?2、天气预报:问题:(1)大量的天气数据如何存储?(2)大量的天气数据如何计算?如果你想要学好大数据最好加入一个好的学习环境,可以来这个Q群251956502这样大家学习的话就比较方便,还能够共同交流和分享资料什么是大数据,本质?(1)数据的存储:分布式文件系统(分布式存储)(2)数据的计算:分布式计算Ja
分类:其他好文   时间:2019-07-15 15:58:47    阅读次数:116
大数据开发需要学习什么?大数据平台是什么?
大数据开发专业需要学习的内容包括三大部分,分别是大数据基础知识、大数据平台知识、大数据场景知识。大数据基础知识:有三个主要部分,分别是数学、统计学和计算机等学科。大数据基础知识往往决定了开发人员未来的成长高度,所以要重视基础知识的学习。大数据平台知识:是大数据开发的基础,在学习期间,往往以搭建Hadoop、Spark平台为主,一方面Hadoop对机器的硬件要求不高,另一方面Hadoop的使用也非常
分类:其他好文   时间:2019-07-07 12:42:40    阅读次数:88
大数据基础教程:创建RDD的二种方式
大数据基础教程:创建RDD的二种方式 1.从集合中创建RDD val conf = new SparkConf().setAppName("Test").setMaster("local") val sc = new SparkContext(conf) //这两个方法都有第二参数是一个默认值2 分 ...
分类:其他好文   时间:2019-06-12 16:37:50    阅读次数:99
【原创】大数据基础之Kudu(5)kudu增加或删除目录/数据盘
kudu加减数据盘不能直接修改配置fs_data_dirs后重启,否则会报错: Check failed: _s.ok() Bad status: Already present: FS layout already exists; not overwriting existing layout: ...
分类:其他好文   时间:2019-05-25 20:17:07    阅读次数:786
【原创】大数据基础之Mongodb(2)常用查询命令
1 下载 https://www.mongodb.com/download-center/community 比如: https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-4.0.9.tgz 2 连接 # cd $MONGODB_HOME# bi ...
分类:数据库   时间:2019-05-16 11:04:29    阅读次数:120
你如何制定一份可实施的2019年大数据学习计划?
那么如何才能制定出一份可行性强的大数据学习计划呢?我们可以从以下几个方面去制定。一、目标首先你需要制定一个明确的你想要实现的长远的目标。比如,半年内学习相关课程,初步掌握大数据基础知识;比如,一年内熟悉并能在实际项目中应用;再比如,1年内达到市面上对大数据分析师的基本要求,成功找到一份大数据分析师的工作。在这里还是要推荐下我自己建的大数据学习交流群:529867072,群里都是学大数据开发的,如果
分类:其他好文   时间:2019-05-06 13:07:22    阅读次数:179
大数据基础原理
http://yuedu.baidu.com/ebook/d128cf8e33687e21ae45a935?pn=1&click_type=10010002 2.3 Hadoop原理2.3.1 Hadoop HDFS原理HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDFS能提供高吞吐量的 ...
分类:其他好文   时间:2019-05-01 01:18:26    阅读次数:168
【原创】大数据基础之Kudu(2)移除dead tsever
当kudu有tserver下线或者迁移之后,旧的tserver会一直以dead状态出现,并且tserver日志中会有大量的连接重试日志,一天的错误日志会有几个G, W0322 22:13:59.202749 16927 tablet_service.cc:290] Invalid argument: ...
分类:其他好文   时间:2019-03-22 22:59:53    阅读次数:532
【原创】大数据基础之Flume(2)Sink代码解析
flume sink核心类结构 1 核心接口Sink org.apache.flume.Sink process为核心接口,返回值为状态,只有两个:ready和backoff,调用方会根据返回值做相应处理,后边会看到;这个接口也是扩展flume sink需要实现的接口,比如KuduSink; 2 S ...
分类:Web程序   时间:2019-03-21 12:04:24    阅读次数:272
95条   上一页 1 2 3 4 ... 10 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!