最近有个需求，计算用户画像。 系统大概有800W的用户量，算每个用户的一些数据。 数据量比较大，算用hive还是毫无压力的，但是写的oracle，在给出数据给前端，就比较难受了。 然后换了种解决方法： 1.hive计算，写的HDFS 2.API读出来，写到hbase（hdfs和hbase的版本不匹配 ...
分类：
编程语言 时间：
2017-07-29 16:44:10
阅读次数：
221
大数据的发展前提 关于大数据的概念事实上在1998年已经就有人提出了，可是到了如今才開始有所发展，这些事实上都是和当下移动互联网的快速发展分不开的，移动互联网的快速发展，为大数据的产生提供了很多其它的产生大数据的硬件前提，比方说智能手机。智能硬件。车联网，pda等数据的产生终端。这些智能通过移动通信 ...
分类：
其他好文 时间：
2017-07-26 11:35:51
阅读次数：
132
随着电商、金融业和移动互联网的普及，个人身份画像较十年前有了跨越式的发展。 十几年前仅能获取到网友的发帖回帖记录、QQ等级，而对涉及到金融的消费类数据基本无从下手，产业还没有实现规模化，也就无法谈数据源的普适度。 今天是很好的时代。网银接口、社保接口、公积金接口、淘宝消费接口、京东消费接口、外卖消费 ...
分类：
其他好文 时间：
2017-07-17 20:10:26
阅读次数：
180
一、用户画像 參考：http://www.36dsj.com/archives/16090 1、为什么要做用户画像？ 一方面是海量信息的汇集。比如京东是一家大型全品类综合电商。海量商品和消费者产生了从站点前端浏览、搜索、评价、交易到站点后端支付、收货、客服等多维度全覆盖的数据体系，还有一方面日益复杂 ...
分类：
其他好文 时间：
2017-07-13 20:18:54
阅读次数：
162
往期文章： 华为软件开发云测评报告一：项目管理 华为软件开发云测评报告二：代码检查 体验环境 体验方式：PC端 系统：Windows 64位 浏览器类型：Chrome浏览器 浏览器版本：58.0.3029.110 体验时间：2017.07.06 分析目的 了解华为软件开发云的测试管理服务功能，分析其 ...
分类：
其他好文 时间：
2017-07-13 10:44:02
阅读次数：
180
用户画像相关知识点 1、用户画像是什么？ 用户画像（User Profile），即用户信息标签化。 用户画像有很多的的标签组成，每个标签都规定了观察、认识、描述用户的角度。标签根据企业业务的发展情况，或多或少，对外而言都是一个整体，这个整体称之为用户画像。 2、为什么需要用户画像？ 用户画像的核心工 ...
分类：
其他好文 时间：
2017-06-25 00:16:42
阅读次数：
232
欢迎讨论 : ) 前言1 TTPPRC，是一个为了更容易、透切地进行商业分析而整理出的分析模型。通过这个模型，可以让不具备专业商业知识的大众都能容易得出商业分析结果。 此文是读者阅读原文后，而整理的一份笔记。原文地址：https://zhuanlan.zhihu.com/p/20325151 ，作者 ...
分类：
其他好文 时间：
2017-06-22 22:19:28
阅读次数：
1772
一、大数据平台 大数据在工作中的应用有三种： 与业务相关，比如用户画像、风险控制等； 与决策相关，数据科学的领域，了解统计学、算法，这是数据科学家的范畴； 与工程相关，如何实施、如何实现、解决什么业务问题，这是数据工程师的工作。 与业务相关，比如用户画像、风险控制等； 与决策相关，数据科学的领域，了 ...
分类：
其他好文 时间：
2017-06-21 13:51:07
阅读次数：
172
理解现在--挖掘规律--预测未来 精准营销智能风控运营优化 多维分析挖掘预测敏捷BI 分析展示数据挖掘语音识别人脸识别 数据仓库Hadoop数据集市 数据采集-数据存储-数据查询-数据分析 大数据建模：-风险建模能力：理赔欺诈-用户画像能力：精准营销-疾病预测能力：病历分析 保险社交营销 保险社交图 ...
分类：
其他好文 时间：
2017-06-17 20:47:22
阅读次数：
155
这是一组使用HTML5 SVG过滤器制作的炫酷液态水滴融合分解动画特效。这些SVG动画特效使一些HTML元素。如菜单、分页button、APP、选择框等元素的过渡动画像几粒水滴一样融合分解。效果很的酷。 通过SVG Filters能够改动一个给定的图形，创建我们须要的结果。SVG中包括了一组能够运行 ...
分类：
Web程序 时间：
2017-06-10 12:24:14
阅读次数：
234
