当系统创建一个进程同时为其创建它地址空间时,此地址空间中大部分都是闲置的。为了使用这部分地址空间,我们必须调用VirtualAlloc来分配其中的区域。分配区域的操作被称为预定。当应用程序预定地址空间区域时,系统会确保预定的区域的起始地址正好是分配粒度的整数倍。分配粒度根据不同的平台而有所不同。现在 ...
数据平台做一些计算需要通过hive jdbc方式连到hiveserver2执行job,但是hiveserver 正常运行一段时间后,总是会报如下OOM: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 Hive history file=/tmp/work/ ...
分类:
其他好文 时间:
2017-09-21 14:47:44
阅读次数:
164
目前市面上没有针对全国全量企业工商注册数据的一个具体数字,导致没有人知道中国到底有多少家企业。本分析报告是北京云创数联科技有限公司旗下的数据平台 数据铺子(pu-zi.com),基于自己的全国全量工商注册数据做出的分析结果。 从统计数据上看,目前企业信息存量超过1亿家,其中包括在营业企业3000万家 ...
分类:
其他好文 时间:
2017-09-20 00:50:35
阅读次数:
168
技术栈数据流向平台规模差异化,隔离化YARN: https://baike.baidu.com/item/yarn/16075826?fr=aladdin今天先到这儿,希望对您在系统架构设计与评估,团队管理, 项目管理, 产品管理,团队建设 有参考作用 , 您可能感兴趣的文章: 互联网电商购物车架构... ...
分类:
其他好文 时间:
2017-09-16 13:33:34
阅读次数:
247
RDD(Resilient Distributed Datasets)弹性分布式数据集。RDD可以看成是一个简单的"数组",对其进行操作也只需要调用有限的"数组"中的方法即可,但它与一般数组的区别在于:RDD是分布式存储,可以跟好的利用现有的云数据平台,并在内存中进行。此处的弹性指的是数据的存储方式 ...
分类:
其他好文 时间:
2017-09-09 13:48:30
阅读次数:
152
自阿里巴巴在中国推出淘宝这一购物平台,极大地改变人们的衣食住行。对于运营商阿里巴巴来说,这是一个好的发展前景,怎么很好地经营购物平台、开展多元化购物方式是它需要探讨的内容。阿里巴巴创建大数据平台,通过统计买家与卖家的各种消费与被消费行为,在保障平台稳定性前提下,还能够很好地推出各种营销策略,促进营业 ...
分类:
其他好文 时间:
2017-09-04 22:36:46
阅读次数:
276
一 大数据指数平台 1.http://index.baidu.com/ 百度指数对比耐克鞋子和阿迪达斯 2.https://alizs.taobao.com/ 阿里指数(没会员登录) 3.http://www.weizhishu.com/ 微指数大数据平台 二.特别有意思的大数据实例 啤酒与尿布 全 ...
分类:
其他好文 时间:
2017-09-04 13:16:25
阅读次数:
129
前言1.hive简介1.1 hive组件与相应功能:1.2 hive的表类型1.3 分区表1.3 分隔符1.4 hive的数据存储2.数据类型2.1 基本数据类型2.1 复杂数据类型2.3 NULL3.基本操作3.1 数据库操作3.2 表操作3.3 视图3.4 数据导入导出3.hsql3.1 hsq... ...
分类:
其他好文 时间:
2017-08-30 21:36:33
阅读次数:
390
通过使用 Talend 大数据平台解决方案, 联想公司运营成本(员工成本)在1年内减少超过 100 万美元, 从而保证了快速构建团队,并建立生产级的安全性和快速上线时间。超过95%内部上市请求在14天内完成。ThinkPad 笔记本电脑系列的周边产品,例如支架、保护壳等的订购率增加了18%。通过这种联合分析,实现了联想公司每个零售单位11%的收入增长率。
分类:
其他好文 时间:
2017-08-30 15:49:51
阅读次数:
454
原文地址:http://www.infoq.com/cn/articles/qiniu-big-data-platform-evolution-and-analysis?utm_source=infoq&utm_medium=popular_widget&utm_campaign=popular_c ...
分类:
其他好文 时间:
2017-08-25 16:51:13
阅读次数:
251