1.安装centos7 mini。 1.1切换到root用户下面。通过命令：cd /etc/sysconfig/network scripts/，来编辑ifcfg eno,编辑之后的结果如下： 1.2切换到etc目录下面，编辑resolv.co nf, ...
分类：
其他好文 时间：
2018-07-11 19:50:16
阅读次数：
135
简单介绍 在写一个数据平台的时候，发现需要进行通过率的统计，所以不可避免的出现小数的情况。至此，会出现无限小数，那么如何进行取舍呢？ 实际操作 可以使用decimal模块，decimal意思为十进制，这个模块提供了十进制浮点运算支持。 常用方法 1.可以传递给Decimal整型或者字符串参数，但不能 ...
分类：
编程语言 时间：
2018-07-11 12:41:38
阅读次数：
268
广义上来说，Hadoop大数据平台也可以看做是新一代的数据仓库系统， 它也具有很多现代数据仓库的特征，也被企业所广泛使用。因为MPP架构的可扩展性，基于MPP的数据仓库系统有时候也被划分到大数据平台类产品。 但是数据仓库和Hadoop平台还是有很多显著的不同。针对不同的使用场景其发挥的作用和给用户带 ...
分类：
其他好文 时间：
2018-07-07 20:54:38
阅读次数：
173
本文主要讲解kafka日常运维的命令，包括topic管理、性能测试脚本。 kafka版本0.10.0，安装步骤见 "大数据平台搭建 kafka集群的搭建" 常用脚本 如下所有的命令均基于 ,服务器列表如下： 10.20.112.59 10.20.112.64 10.20.112.65 10.20.1 ...
分类：
其他好文 时间：
2018-07-04 20:10:10
阅读次数：
366
本文来自 "腾讯云技术沙龙" ，本次沙龙主题为 "在线教育个性化教学技术实践" 演讲嘉宾：谭安林，腾讯高级工程师。2015年加入腾讯，8年互联网从业经历，从事大数据平台与产品开发相关工作；先后参与广告、金融等领域产品项目，目前负责行为预测解决方案，帮助客户盘活现有客群、挖掘潜在高价值新客。目前我们的 ...
分类：
其他好文 时间：
2018-07-03 12:00:33
阅读次数：
218
kafka是用于构建实时数据管道和数据流的应用程序。具有实时横向扩展、高吞吐量、支持大量堆积具有容错性和速度快等特点。它是一个高性能分布式消息系统。通常一个分布式流数据平台它具有三个特点：发布和订阅功能，类似于消息系统以容错的方式记录流处理流Kafka通常用于构建在系统或应用之间的实时数据流管道、构建实时流应用程序用于转换和响应数据流
分类：
其他好文 时间：
2018-07-01 11:40:42
阅读次数：
135
用kafka构建数据管道 把kafka看着是一个数据的端点，怎么把kafka数据移到mysql,elasticSearchs 这里面介绍kafka connect API怎么样帮忙我们把数据移到我们想要的位置。 构建数据管道时需要考虑的问题 1.及时性，kafka作为一个基于流的数据平台，提供了可靠 ...
分类：
其他好文 时间：
2018-06-29 00:07:16
阅读次数：
175
之前分享的一篇关于智慧人社的大数据应用，也仅仅是简单的说了一下当前智慧人社建设中所面临以及要解决的问题。这篇算是补上那篇欠缺的内容吧，把智慧人社大数人力资源据解决方案的大数据平台搭建、技术架构、数据可视化等几个方面的内容给朋友分享一下。
分类：
其他好文 时间：
2018-06-28 14:02:21
阅读次数：
150
之前分享的一篇关于智慧人社的大数据应用，也仅仅是简单的说了一下当前智慧人社建设中所面临以及要解决的问题。这篇算是补上那篇欠缺的内容吧，把智慧人社大数人力资源据解决方案的大数据平台搭建、技术架构、数据可视化等几个方面的内容给朋友分享一下。
分类：
其他好文 时间：
2018-06-28 13:42:07
阅读次数：
184
一、背景介绍 最近几天，接到公司的一个将当前大数据平台数据全部迁移到阿里云ODPS平台上的任务。而申请的这个ODPS平台是属于政务内网的，因考虑到安全问题当前的大数据平台与阿里云ODPS的网络是不通的，所以不能使用数据采集工作流模板。 然而，考虑到原大数据平台数据量并不是很大，可以通过将原大数据平台 ...
分类：
其他好文 时间：
2018-06-27 18:58:59
阅读次数：
239
