消费者是品牌最重要的资产,如何能够更好地留存消费者是企业制胜的关键。以阿里为代表的平台也提出了要从“流量运营”向“消费者运营”的转型。在信息技术发展日新月异的今天,各大企业与平台纷纷建立了自己的大数据平台,累积了海量的数据,如何利用这些数据来洞察消费者,做好消费者运营,成为企业必修的一个课题。本文将 ...
分类:
其他好文 时间:
2020-06-07 09:17:50
阅读次数:
168
在人口流量红利不再,获客成本越来越高的时代,精益创业、MVP的概念已经深入人心,精细化运营也是大势所趋,而这些背后本质上都依赖数据化运营,那如何根据现有业务,快速从0开始打造一个契合业务的数据产品呢?本文将以某二手交易平台业务为基础,讲述整个数据平台从0到1的演进与实践,希望对大家能有所启发。1、背景在某二手交易平台开始大数据平台建设之前,整个数据从需求提出到研发流程再到数据报表、数据产品,也是经
分类:
其他好文 时间:
2020-06-06 23:08:48
阅读次数:
242
CDH6.3.2启用Kerberos集成使用phoenix标签(空格分隔):大数据平台构建一、下载并安装Phoenixparcel二、安装CSD文件三、在ClouderaManager中添加Phoenix服务(前提是已经安装了HBase服务)四、配置HBase以用于Phoenix五、验证Phoenix安装与冒烟测试六、导入数据验证测试七、七:关于phoinex的schema与hbase的names
分类:
其他好文 时间:
2020-06-05 00:31:53
阅读次数:
121
如何在CDH6.3.2启用Kerberos中使用sentry限制用户读写标签(空格分隔):大数据平台构建一:系统环境介绍二:CDH6.3.2启用安装sentry三:sentry使用四:启用sentry测试一:系统环境介绍操作系统CentOS7.5x64cdh/cm版本cm:6.3.1cdh:6.3.2采用root用户操作前置条件:1.CDH集群运行正常2.集群已启用Kerberos且正常使用##二
分类:
其他好文 时间:
2020-06-04 01:09:14
阅读次数:
106
CDH6.3.2开启kerberos遇到的坑标签(空格分隔):大数据平台构建一:关于安装系统的一些坑二:关于开启KerberosJava的一些坑三:关于hive一:关于安装系统的一些坑1)安装之前一定确认jdk的安装目录因为通过centos7这个系统默认会在装之前会自带一些jdk版本要彻底卸载这个jdk,最好是保证安装系统之前自装最简的centos7.5x64mini2)系统最好分区为三个/swa
分类:
其他好文 时间:
2020-06-02 18:51:54
阅读次数:
209
CDH6.3.2开启Kerberos认证标签(空格分隔):大数据平台构建一:如何安装及配置KDC服务二:如何通过CDH启用Kerberos三:如何登录Kerberos并访问Hadoop相关服务一:如何安装及配置KDC服务1.1系统环境1.操作系统:CentOS7.5x642.CDH6.3.23.采用root用户进行操作1.2KDC服务安装及配置1.在ClouderaManager服务器上安装KDC
分类:
其他好文 时间:
2020-05-30 11:10:46
阅读次数:
263
###1.大数据架构 说明: 1.该大数据平台采用的阿里云服务器,所以在集群部署和运维上会减少很多工作量 2.主题的计算引擎采用Spark,部分有Flink 3.数据挖掘主要是应用python的一些挖掘框架,模型比如词袋模型和一些常见的nlp算法 4.任务调度是自研的诸葛大数据调度平台 ...
分类:
其他好文 时间:
2020-05-28 11:34:57
阅读次数:
68
大数据平台CDH6.3.2部署标签(空格分隔):大数据平台构建一:环境初始化二:安装CDH6.3.2一:环境初始化1.1环境介绍系统:CentOS7.5X64cat/etc/hosts----192.168.11.160dev01.lanxintec.cn192.168.11.161dev02.lanxintec.cn192.168.11.162dev03.lanxintec.cn----1.2:
分类:
其他好文 时间:
2020-05-28 10:25:00
阅读次数:
800
做任何事情都要有目标,然后根据这个目标根据自身的条件和外部的情况制定一个思路,这个思路也可以理解为实现目标的路径。那么大数据的平台搭建也不例外。 脚本工具化 在数据收集,存储、分析的初期,通常来说程序员都是根据业务需求,通过一些脚本来完成数据收集,分析的工作。表面上是完成了一些数据操作的功能,同时也 ...
分类:
其他好文 时间:
2020-05-27 20:44:05
阅读次数:
71
###1.主体架构 说明: 该平台涉及到的子系统较多,而且由于保密的因素,不宜说明太过详细。本人只负责以下标注红框的设计和研发 ...
分类:
Web程序 时间:
2020-05-27 20:35:17
阅读次数:
85