出售高质量数字校园系统源码，包含单点登录、基础数据平台、通用数据接口、综合信息门户、OA办公、人力资源、后勤、教科研、设备资产、教师成长、教学教务、教育质量检测、招生管理、学生管理、住宿管理、学生缴费、顶岗实习与就业等全功能模块，模块化设计，可独立使用，联系QQ：564073314,电话：15623 ...
分类：
其他好文 时间：
2017-05-08 14:44:39
阅读次数：
147
数据平台的建设可以当做一个产品来设计。从广义上来讲，所有以数据驱动为核心的都可以称为数据产品（如数据报表平台，DMP，BI平台），从狭义上来讲，就是公司内部的数据平台。今天我们要讨论的，主要是在公司内部搭建数据平台。公司的内部数据平台，主要是给各业务提供数据处理..
分类：
其他好文 时间：
2017-05-08 14:42:58
阅读次数：
250
本节内容 1.大数据基础 1.1大数据平台基本框架 1.2学习大数据的基础 1.3学习Spark的Hadoop基础 2.Hadoop生态基本介绍 2.1Hadoop生态组件介绍 2.2Hadoop计算框架介绍 3.Spark概述 3.1 Spark出现的技术背景 3.2 Spark核心概念介绍 4. ...
分类：
其他好文 时间：
2017-05-07 21:59:08
阅读次数：
317
分布式系统实践 1. 一文读懂大数据计算框架与平台 http://dwz.cn/5SgDC5 摘要: 这篇文章从批处理模型, 流式计算模型和交互式分析模型三个角度总结了开源大数据框架的特点, 对于大家了解大数据平台的全貌有一定的帮助. 2. 美团的大数据平台架构实践 http://dwz.cn/5T ...
分类：
其他好文 时间：
2017-05-05 21:51:02
阅读次数：
182
关于两者的讨论文章： https://www.zhihu.com/question/26568496 http://blog.jobbole.com/97150/ 文章通过多个角度对两者进行对比，根据目前的使用情况，Spark更适用于我们的大数据平台进行大数据运算。 公司的Spark集群资源正在搭建 ...
分类：
其他好文 时间：
2017-05-04 21:53:27
阅读次数：
145
一、数据入库方式 目前批量数据入库TDH大数据平台主要有如下几种方式 1、手工入录 一些静态表手工维护的数据，可以直接采用insert导入，或者使用waterdrop客户端工具导入，只适用少数据量的导入和更新 2、dblink TDH inceptor支持建立dblink直接连接db2，oracle ...
分类：
其他好文 时间：
2017-05-04 01:33:10
阅读次数：
1476
作为相对于cloudera的CDH的另一个选择是hortonworks的HDP和HDF，HDF是针对物联网的套件，HDP是与CDH对应的大数据平台产品。 hortonworks的HDP和HDF将storm和kafka集成进大数据平台，可以进行统一监控管理。 网络上有两套参考实现，都提供了模拟的数据流 ...
分类：
其他好文 时间：
2017-04-17 14:32:59
阅读次数：
1569
前言 本文基于网易乐得无埋点数据收集SDK，无埋点数据收集SDK用于向大数据平台提供全量，完整，准确的客户端数据．
Android端无埋点数据收集SDK实现中涉及到比较关键的技术点有：
1. ...
分类：
移动开发 时间：
2017-04-14 12:04:57
阅读次数：
404
一、产品服务 EDS 1、多源数据导入到HDFS存储 2、提供之上的sql查询分析能力 ADS 1、允许封装各种逻辑成docker镜像，由云管理平台协调分布式计算资源 2、调度docker执行，产生结果，用返回值或大数据落地 二、模块划分： 模块分为 总览、数据平台、分析应用、模型示例和用户中心 功 ...
分类：
其他好文 时间：
2017-04-08 11:09:32
阅读次数：
275
分布式系统实践 1. 稳定和性能如何兼顾？58大数据平台的技术演进与实践 http://dwz.cn/5GIKUX 摘要: 本文将为你分享58大数据平台在最近一年半内技术演进的过程，包括：58大数据平台目前的整体架构是怎么样的；最近一年半的时间内我们面临的问题、挑战以及技术演进过程；以及未来的规划。 ...
分类：
其他好文 时间：
2017-04-08 09:35:20
阅读次数：
158
