大数据的时代已经来了，信息的爆炸式增长使得越来越多的行业面临这大量数据需要存储和分析的挑战。Hadoop作为一个开源的分布式并行处理平台，以其高拓展、高效率、高可靠等优点越来越受到欢迎。这同时也带动了hadoop商业版的发行。这里就通过大快DKhadoop为大家详细介绍一下hadoop大数据平台架构内容。
分类：
其他好文 时间：
2018-04-08 16:33:47
阅读次数：
195
这次开发功能是OEM统计报表。统计报表的数据由大数据平台部的同事收集，数据的展示由我们部门开发。 大数据那边使用 Kylin 分布式分析引擎（kylin官方文档）。 Kylin 虽比较偏向大数据相关，但最终大佬们决定把访问 Kylin 的 Dubbo 接口也由我们开发，比较坑。 解决方案一：Myba ...
分类：
编程语言 时间：
2018-03-31 13:17:29
阅读次数：
427
在云计算走向成熟之前，我们更应该关注系统云计算架构的细节，从传统的架构到云上大数据，实现了很多的转变。传统的大数据平台计算和数据一般都在一起，到云上之后计算有可能是虚拟机、有可能是容器，存储和计算是分离的。任何计算节点访问存储时都是通过高速互联网络把数据迁移到本地来。实现的优势也就是大数据的服务化，灵活配置。因此，借助强大的计算性能，结合云计算平台的优势，从传统架构的大数据平台向云上数据的转变，将
分类：
其他好文 时间：
2018-03-23 16:55:09
阅读次数：
164
不多说，直接上干货！ 这是来自FineBI官网提供的帮助文档 目录: 1、描述 2、操作 3、注意事项 1、描述 1、描述 Hbase作为大数据平台的重要组成部分，在数据存储方面起到了至关重要的作用，因此BI连接Hbase也是必不可少的功能之一。FineBI提供的方法是通过phoenix连接hbas ...
分类：
其他好文 时间：
2018-03-22 22:39:44
阅读次数：
1062
世界共享经济鼻祖罗宾·蔡斯曾经预言：“未来30年最大的财富将从未被共享的资源中获得”。近年来，共享经济在中国掀起了一股潮流。来设计与时俱进，推出了共享经济模式--产品合伙人制（按销量分成模式），上线不到1年就凭借着对工业设计和制造业领域的深刻理解，帮助众多中小制造企业通过较低的启动成本与一线设计公司合作，提高产品竞争力，实现企业成功转型。未来，来设计将打造‘设计＋产业’生态圈、工业设计大数据平台、
分类：
其他好文 时间：
2018-03-19 17:36:17
阅读次数：
177
世界共享经济鼻祖罗宾·蔡斯曾经预言：“未来30年最大的财富将从未被共享的资源中获得”。近年来，共享经济在中国掀起了一股潮流。来设计与时俱进，推出了共享经济模式--产品合伙人制（按销量分成模式），上线不到1年就凭借着对工业设计和制造业领域的深刻理解，帮助众多中小制造企业通过较低的启动成本与一线设计公司合作，提高产品竞争力，实现企业成功转型。未来，来设计将打造‘设计＋产业’生态圈、工业设计大数据平台、
分类：
其他好文 时间：
2018-03-19 17:32:55
阅读次数：
149
大数据平台部 运维研发组 MongoDB硬件及开发标准规范 说明： 无特殊情况，均以此文档为参考文件搭建，如有特殊情况，需与运维研发组和开发组商议后进行更改。 MongoDB 标 题硬件标准及研发规范 大数据平台部 运维研发组 MongoDB硬件及开发标准规范 说明： 无特殊情况，均以此文档为参考文 ...
分类：
数据库 时间：
2018-03-19 16:54:46
阅读次数：
1091
一、Flume基础部分： Flume -- 日志收集框架 产生背景： 日志分散到各个机器上，又想用大数据平台进行统计分析 从其他server把日志移动收集到集群上，并能够监控，需要有时效性、容错性、负载均衡 Flume 一般通过配置configuration file，来实现各种数据的收集 概述： ...
分类：
Web程序 时间：
2018-03-11 17:24:50
阅读次数：
204
