《创造101》收官,火箭少女101成团。 孟美岐、吴宣仪 、杨超越、段奥娟、yamy、赖美云、紫宁、杨芸晴、李紫婷、傅菁、徐梦洁11人,从457家公司的13778名练习生中一路披荆斩棘,终于出道成团。 据网络影视数据平台骨朵数据,截至6月23日晚,《创造101》的总播放量超过44.4亿,比收官不久的 ...
分类:
其他好文 时间:
2018-06-25 17:53:11
阅读次数:
228
课程链接:Hadoop大数据平台架构与实践--基础篇 1.MapReduce原理 分而治之,一个大任务分成多个小的子任务(map),并行执行后,合并结果(reduce) 问题1:1000副扑克牌少哪一张牌(去掉大小王) 问题2:100GB的网站访问日志文件,找出访问次数最多的IP地址 ...
分类:
其他好文 时间:
2018-06-21 22:31:29
阅读次数:
202
AIOps代表运维操作的人工智能(Artificial Intelligence for IT Operations), 是由Gartner定义的新类别,Gartner的报告宣称,到2020年,将近50%的企业将会在他们的业务和IT运维方面采用AIOps,远远高于2017年的10%。 Gartner ...
分类:
其他好文 时间:
2018-06-21 11:31:26
阅读次数:
352
根据太保家园项目的最终目标,在一期建设中,需要将太平洋保险集团下属的寿险,产险,车险等30多个核心系统数据,通过实时同步复制的方式,统一集中到大数据平台。其中涉及数据的转换,标化,清洗,去重等一系列过程,具体需求如下:
1、 需要将核心数据从30多个系统同步到大数据平台的kafka组件。
2、 确保数据复制的实时性(秒级)和数据的准确性
3、 复制的数据需要加上时间,操作类型等标签,便于后端应用识别
4、 以生产环境的dg库作为数据的汇聚源端,减轻对生产库的影响
5、 入kafka的数据格式可灵活配置,以便更好的适配后端应用
6、 需要具备数据操作统计和数据比对功能,便于核对数据的准确性
分类:
数据库 时间:
2018-06-13 15:14:53
阅读次数:
1371
在企业里快速搭建大数据平台除了Ambria外还可以用ClouderaManager,这两种工具相对于纯手工搭建确实便捷很多,但是有利也有弊,相对于新手来说就不便于掌握内部原理,不好排错等,而纯手工搭建,出错较多,不容易成功。一.规划:192.168.3.201server/agentmysql192.168.3.202agentnamenode192.168.3.203agentnamenode(
分类:
其他好文 时间:
2018-06-13 15:07:12
阅读次数:
299
C语言/C++编程学习:不做C/C++工作也要学C/C++的原因!这些是C/C++能做的 服务器开发工程师、人工智能、云计算工程师、信息安全(黑客反黑客)、大数据 、数据平台、嵌入式工程师、流媒体服务器、数据控解、图像处理、音频视频开发工程师、游戏服务器、分布式系统、游戏辅助等 ...
分类:
编程语言 时间:
2018-06-13 12:04:27
阅读次数:
251
C语言/C++对编程学习的重要性!这些是C/C++能做的 服务器开发工程师、人工智能、云计算工程师、信息安全(黑客反黑客)、大数据 、数据平台、嵌入式工程师、流媒体服务器、数据控解、图像处理、音频视频开发工程师、游戏服务器、分布式系统、游戏辅助等 ...
分类:
编程语言 时间:
2018-06-13 11:55:24
阅读次数:
181
欢迎大家前往 "腾讯云+社区" ,获取更多腾讯海量技术实践干货哦~ 作者 :jasonys,隶属于腾讯技术工程事业群数据平台部,负责TBase数据的技术研发和架构设计,有超过10年的数据库内核开发设计经验,完成多种数据库的架构设计和开发。 2017年PGXZ改名为TBase,以发布会的方式正式对外进 ...
分类:
数据库 时间:
2018-06-13 11:36:47
阅读次数:
189
cdh5.14.2中集成安装kylin与使用测试标签(空格分隔):大数据平台构建一:kylin简介二:安装配置kylin三:kylin运行实例一:kylin简介ApacheKylin?是一个开源的分布式分析引擎,提供Hadoop/Spark之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBayInc.开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。kylin软件下
分类:
其他好文 时间:
2018-06-11 23:41:21
阅读次数:
994
在CDH5.14.2中启用kudu的配置标签(空格分隔):大数据平台构建一:系统平台介绍二:安装kudu的集成一:系统平台介绍1.1.关于kudu的介绍Kudu是Cloudera开源的新型列式存储系统,是ApacheHadoop生态圈的新成员之一(incubating),专门为了对快速变化的数据进行快速的分析,填补了以往Hadoop存储层的空缺。 Hadoop生态系统有很多组件,每一个组件有不同
分类:
其他好文 时间:
2018-06-11 14:47:12
阅读次数:
624