前文对 Spark 和 Flink 的引擎做了对比。对用户来说引擎并不是考虑数据产品的唯一方面。开发和运维相关的工具和环境,技术支持,社区等等,对能不能在引擎上面做出东西来都很重要。这些构成了一个产品的生态。可以说引擎决定了功能和性能的极限,而生态能让这些能力真正发挥出作用。
分类:
其他好文 时间:
2019-04-28 18:52:23
阅读次数:
135
目前在做的数据产品都是基于数据仓库上实现,主要的应用方式包括固定报表、数据查询、数据挖掘等。 在知识类相关的数据分析产品中,通常需要对多个业务系统的数据进行集成,更需要对数据分层进行科学的规划。 为什么分层 我们对数据进行分层的一个主要原因就是希望在管理数据的时候,能对数据有一个更加清晰的掌控,详细 ...
分类:
其他好文 时间:
2019-04-27 09:52:06
阅读次数:
126
淘宝网拥有国内最具商业价值的海量数据,而帮助消费者进行理性的购物决策,是淘宝数据平台与产品部的使命。为此,我们进行了一系列数据产品的研发,比如为大家所熟知的量子统计、数据魔方和淘宝指数等。本文将以数据魔方为例,向大家介绍淘宝在海量数据产品技术架构方面的探索。 按照数据的流向来划分,我们把淘宝数据产品 ...
分类:
其他好文 时间:
2019-04-07 10:07:16
阅读次数:
189
淘宝网拥有国内最具商业价值的海量数据。截至当前,每天有超过30亿的店铺、商品浏览记录,10亿在线商品数,上千万的成交、收藏和评价数据。如何从这些数据中挖掘出真正的商业价值,进而帮助淘宝、商家进行企业的数据化运营,帮助消费者进行理性的购物决策,是淘宝数据平台与产品部的使命。 数据产品的一个最大特点是数 ...
分类:
其他好文 时间:
2019-03-16 23:19:06
阅读次数:
234
引言 Odoo是欧洲开发的,世界排名第一的开源免费ERP系统。该系统从2002开始研发,经过十几年的发展,去年下半年发布了12.0版。该软件因为免费下载,源代码开放,吸引了世界范围很多人参与使用及开发,形成了一个庞大的生态圈。生态圈不断地给Odoo添砖加瓦,开发了2万多个功能插件,涵盖了企业应用的方 ...
分类:
其他好文 时间:
2019-03-10 17:42:31
阅读次数:
359
翻译 :孙文学 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在过去几年中,许多基于预测模型的数据产品孕育而生。这些产品既包括天气预报,同时还有提供预测航班时刻的推荐引擎,该引擎预测的准确率比航空公司自身的预测率还要高。但这些产品仍然只是做出预测,并没有考虑到预测的结果能为人们带来什么。预测技 ...
分类:
其他好文 时间:
2018-12-19 11:11:16
阅读次数:
179
翻译 :孙文学 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在过去几年中,许多基于预测模型的数据产品孕育而生。这些产品既包括天气预报,同时还有提供预测航班时刻的推荐引擎,该引擎预测的准确率比航空公司自身的预测率还要高。但这些产品仍然只是做出预测,并没有考虑到预测的结果能为人们带来什么。预测技 ...
分类:
其他好文 时间:
2018-12-19 11:10:49
阅读次数:
156
? 随着数据已经逐步成为一个公司宝贵的财富,大数据团队在公司往往会承担更加重要的角色。大数据团队往往要承担数据平台维护、数据产品开发、从数据产品中挖掘业务价值等重要的职责。所以对于很多大数据工程师,如何根据业务需求去选择合适的大数据组件,做合适的大数据架构工作就是日常工作中最常遇到的问题。在这里根据 ...
分类:
其他好文 时间:
2018-12-10 00:45:25
阅读次数:
185
随着阿里大数据产品业务的增长,服务器数量不断增多,IT运维压力也成比例增大。各种软、硬件故障而造成的业务中断,成为稳定性影响的重要因素之一。本文详细解读阿里如何实现硬件故障预测、服务器自动下线、服务自愈以及集群的自平衡重建,真正在影响业务之前实现硬件故障自动闭环策略,对于常见的硬件故障无需人工干预即 ...
分类:
其他好文 时间:
2018-11-30 17:29:23
阅读次数:
196
随着阿里大数据产品业务的增长,服务器数量不断增多,IT运维压力也成比例增大。各种软、硬件故障而造成的业务中断,成为稳定性影响的重要因素之一。
分类:
其他好文 时间:
2018-11-30 16:35:12
阅读次数:
185