一、底层数据的收集/产品端收集 数据采集简称埋点,收集用户的网页端、产品端、客户端等终端的数据,也包括第三方外部数据。 用户行为——原始数据 二、数据业务化/产品需要什么样的数据 将收集的数据转换成可理解、可量化、可观察的业务指标。单纯的数据没有意义,只有和业务结合才能发挥价。 原始数据——加工数据 ...
分类:
其他好文 时间:
2020-04-08 22:51:35
阅读次数:
152
【摘要】 大数据容器化,大势所趋。头部玩家在进行大数据容器化后,尝到了甜头? 大数据的需求热度,从来都是这个时代的浪尖。然而由于大数据系统的复杂性,一度导致业界大数据已死的各种声音不断。尤其是当MapR被HPE收购,Cloudera公司股票持续跌成狗,使得这种声音进一步放大。其实,大数据的需求一直在 ...
分类:
其他好文 时间:
2020-03-19 17:44:59
阅读次数:
110
来源:https://www.cnblogs.com/mmmjiang13/archive/2012/07/05/2575538.html#!comments 前言 做了两年多针对淘宝的电子商务数据线下数据系统,越到后面越觉得自己还没入门,不管技术上还是业务上,这篇文章既是对自己的积累的一次梳理,更 ...
分类:
其他好文 时间:
2020-03-13 20:20:50
阅读次数:
48
0代码开发是编程人员通过模板的封装,让不精通代码的业务员快速开发所需要的业务应用。大家在谈及软件开发的时候,企业应用定制板块的价值大家都知道,但是为什么难做呢,是代码复用的价值无法体现。如果没法复用代码,系统中会有大量的成本砸在UI、权限、集成、架构等上面,这些不光是企业的成本,也是软件开发商的无形成本。蜘蛛表格帮你降低成本在实际的应用中,企业流程,数据,系统上有一定的相似度,但是因为企业面临的问
分类:
其他好文 时间:
2020-03-07 22:34:45
阅读次数:
79
系统的引导过程1.通电2.bios初始化eg:内存,硬盘没插好3.磁盘引导硬盘里面的数据是以分区形式保存,硬盘上的磁头对硬盘的数据进行扫描##磁道:磁头转一周的轨迹,可以确定数据在哪一环##扇区:确定哪一节的数据##系统引导的过程:#装双系统时,启动windows时,磁头需跳到c盘数据位置,来读取里面的数据,才能启动系统##系统关闭以后,断电,磁头会回到断电的时候所在的位置,硬盘通电,硬盘会转起来
分类:
系统相关 时间:
2020-03-04 22:59:35
阅读次数:
129
1.利用ADS::$DATA(windows文件流绕过)也就是利用了NTFS交换数据流(ADS),ADS是NTFS磁盘格式的一个特性,在NTFS文件系统下,每个文件都可以存在多个数据流。通俗的理解就是其它文件可以“寄宿”在某个文件身上,而在资源管理器中却只能看到宿主文件,找不到寄宿文件。::DATA ...
分类:
其他好文 时间:
2020-02-23 18:18:53
阅读次数:
503
saltstack介绍1、saltstack是使用python语言开发的;2、轻量级的管理工具,批量执行命令;3、常用模块:pkg(包)、file(文件)、cmd(执行命令或脚本)、user、service、cron4、saltstack数据系统Grains(静态数据)pillar(动态数据)saltstack三大功能,远程执行,配置管理,云管理SaltStack是一个服务器基础架构集中化管理平台
分类:
Web程序 时间:
2020-02-10 09:46:41
阅读次数:
75
Spigot MC的部署 及地图插件Dynmap 1. 官方链接 "spigot官网" "地图插件" Spigot是性能比较高的一个Minecraft服务端。~~(但是负担大的时候会丢弃数据和时削)~~ 2. 服务端安装 1. 下载最新的 "地址" 2. 确保电脑上有 git 和 Java。如果是 ...
分类:
其他好文 时间:
2020-02-06 01:13:17
阅读次数:
97
当搭建集群的时候,最好就要服务器之间的时间是同步的,于是就动手试了一下。 时间服务器作用: 大数据产生与处理系统是各种计算设备集群的,计算设备将统一、同步的标准时间用于记录各种事件发生时序, 如E-MAIL信息、文件创建和访问时间、数据库处理时间等。 大数据系统内不同计算设备之间控制、计算、处理、应 ...
分类:
其他好文 时间:
2020-01-30 21:00:09
阅读次数:
165
数据密集型应用特点 需求 存储数据,以便自己或其他应用程序之后能再次找到——数据库 记住开销昂贵操作的结果,加快读取速度——缓存 允许用户按关键字搜索数据,或以各种方式对数据进行过滤——搜索索引 向其他进程发送消息,进行异步处理——流处理 定期处理累积的大批量数据——批处理 关于数据系统的思考 数据 ...
分类:
其他好文 时间:
2020-01-29 10:34:29
阅读次数:
122