package jul30; public enum KeCheng { L1("大数据开发工程师"),L2("大数据挖掘工程师"),L3("大数据架构师"); private String str; public String getStr() {return str;} public void ...
分类：
其他好文 时间：
2019-07-30 12:52:27
阅读次数：
98
01 传统数据基础架构 如图1-1所示，传统单体数据架构(Monolithic Architecture)最大的特点便是集中式数据存储，企业内部可能有诸多的系统，例如Web业务系统、订单系统、CRM系统、ERP系统、监控系统等，这些系统的事务性数据主要基于集中式的关系性数据库(DBMS)实现存储，大 ...
分类：
其他好文 时间：
2019-07-21 23:52:54
阅读次数：
127
1. 五种主流的大数据架构 收集各大互联网公司大数据平台架构 1. 酷狗音乐的大数据平台架构： https://www.infoq.cn/article/kugou-big-data-platform-restructure 2. 滴滴大数据离线和实时平台架构和实践： https://myslide ...
分类：
其他好文 时间：
2019-07-17 00:03:43
阅读次数：
155
编者按：本文是松子（李博源）的大数据平台发展史系列文章的第一篇（共四篇），本系列以独特的视角，比较了非互联网和互联网两个时代以及传统与非传统两个行业。是对数据平台发展的一个回忆，对非互联网、互联网，从数据平台的用户角度、数据架构演进、模型等进行了阐述。 前言，这个数据平台发展史仅是自己经历过由传统数 ...
分类：
其他好文 时间：
2019-07-12 18:36:44
阅读次数：
146
2019年6月28日，巨杉技术社区与恩墨学院在深圳正式宣布全面合作，共同拓展国产数据库技术生态。 在新技术趋势下，原生分布式数据库将成为新一代数据架构的绝对核心，也是企业走向微服务、云化架构的最重要技术支撑。因此，巨杉技术社区和恩墨学院，作为数据库领域最具影响力的技术社区之一，强强联合，建立从社区到 ...
分类：
数据库 时间：
2019-07-04 09:43:11
阅读次数：
171
1.画出你们的大数据架构，然后针对架构提问，如何做到精准一次、小文件规避等2.为什么会产生小文件3.为什么Hadoop不怕数据量大，却怕文件小4.你能告诉我路径占不占元数据内存，如果占，占多少5.小文件会产生什么样的问题，产生的问题会对你们的集群产生什么样的影响6.画出Yarn工程流程7.mr和sp ...
分类：
其他好文 时间：
2019-06-21 09:29:38
阅读次数：
185
这两天真的是被《啥是佩奇》这支广告片刷屏了。佩奇明明是个喜剧角色，却把所有人都给看哭了！中间的剧情，小孙子一句：“想要佩奇”，结果爷爷就开始了满村子的寻找佩奇，到最后寻找到了小编认为是最好看的佩奇不知道大家看了之后是什么感觉，反正我看了之后的感觉是非常感动了。不过经过几天的发酵，“佩奇”这两个字似乎有了更多的含义了！各种”佩奇“齐出不穷，女人的“佩奇”是什么样的？程序员的“佩奇”是什么样的？在这里
分类：
其他好文 时间：
2019-05-28 12:21:43
阅读次数：
128
企业数据架构，很多朋友在尚未了解时总会将它定义为组织用于管理数据的一组标准产品和工具，但它的性质远不止于此。数据架构定义了捕获、转换以及向业务用户提供可使用数据的过程，最重要的是它也确定了使用该数据的人及其独特要求。 欣思博根据现代数据架构的特征进行总结，并为正在开发适应当前时代要求的新型数据架构的 ...
分类：
其他好文 时间：
2019-05-24 18:47:50
阅读次数：
131
1.什么是MongoDB 2.MongoDB的优势有哪些 面向文档的存储：以 JSON 格式的文档保存数据。 任何属性都可以建立索引。 复制以及高可扩展性。 自动分片。 丰富的查询功能。 快速的即时更新。 3 什么是数据库 4.什么是集合(表) 5 什么是文档(记录) 6 MongoDB和关系型数据 ...
分类：
数据库 时间：
2019-04-29 19:13:12
阅读次数：
283
文 |彭超 瓜子大数据架构师 交流微信 | datapipeline2018 一、为什么选择Kafka 为什么选Kafka？鉴于庞大的数据量，需要将其做成分布式，这时需要将Q里面的数据分到许多机器上进行存储，除此之外还有分布式的计算需求。同时需要支持多语言，如Java、GO、php等，另外还有高可用 ...
