什么是机器学习？ 机器学习指的是机器通过统计学算法，对大量的历史数据进行学习从而生成经验模型，利用经验模型指导业务。 目前机器学习主要在一下一些方面发挥作用： 营销类场景：商品推荐、用户群体画像、广告精准投放 金融类场景:贷款发放预测、金融风险控制、股票走势预测、黄金价格预测 SNS关系挖掘:微博粉 ...
分类：
其他好文 时间：
2020-03-30 16:39:57
阅读次数：
164
nCompass-如何制作数据报告 什么是数据报告： 统计运维人员关心的历史数据，并且能够定期生成报告发给运维人员，报告内容主要以应用类和链路类的内容位置。 如果以时间划分： 时报，日报，周报，以及一次性报告。 数据报告三大分类： 我的报告 报告模板（系统默认自带） 分享给我的报告（其他用户创建并分 ...
分类：
其他好文 时间：
2020-03-18 15:56:37
阅读次数：
76
背景： 最近工作中需要核对客户的历史数据， 接近400行，需要核对的列有15列， 肉眼核对简直要吐血 心想着反正在学python呢 人生苦短 何不用python写个脚本 帮助我核对 我省出时间来做些更有意义的事情呢 前提： 我需要核对的两份Excel有以下特点： 有共同的主键 两份Excel的结构不 ...
分类：
编程语言 时间：
2020-03-13 21:05:46
阅读次数：
81
场景分析由于公司zabbix的历史数据存储在elasticsearch中，有个需求是尽可能地把监控的历史数据存储的长一点，最好是一年，目前的情况是三台ES节点，每天监控历史数据量有5G，目前最多可存储一个月的数据，超过30天的会被定时删除，每台内存分了8G，且全部使用机械硬盘，主分片为5，副本分片为1，查询需求一般只获取一周的历史数据，偶尔会有查一个月到两个月历史数据的需求。节点规划为了让ES能存
分类：
其他好文 时间：
2020-03-09 12:00:46
阅读次数：
91
[toc] 1. "Kafka简介" Kafka是一种计算框架，结合了之前的MapReduce批处理和流式计算为一体，可以处理历史数据和实时数据。 流平台具有三个关键功能： 发布和订阅记录流，类似于消息队列或企业消息传递系统。 以容错的持久方式存储记录流。 处理记录流。 Kafka通常用于两大类应用 ...
分类：
其他好文 时间：
2020-03-07 21:04:52
阅读次数：
77
有时候输出日志太多, 最开始的日志就被覆盖了, 所以需要修改一下配置 1. 控制台右键 选择preferences 2. 去掉 勾选 limit console output 调试完记得调回来 否则影响性能 ...
分类：
系统相关 时间：
2020-03-07 18:52:08
阅读次数：
121
1、了解主题 了解主题后，还需要准备与其相关的 学科知识：比如，你的讲话内容是对冲基金，那么你需要知道它在行业中的变化、未来前景、历史数据等等。 一般性知识：是说如果你博览群书，涉猎广泛，那么你的观点会更丰富，演讲会更有说服力。 经验性知识：指讲话者的个人经历。丰富的经验性知识能为工作提供帮助。 2 ...
分类：
其他好文 时间：
2020-03-07 13:12:13
阅读次数：
82
为什么要平稳？ 研究时间序列的最终目的是，预测未来。但是未来是不可知的，我们拥有的数据都是历史，因此只能用历史数据来预测未来。但是，如果过去的数据与未来的数据没有某种“相似度”，那这种预测就毫无道理了。平稳性就是保证这种过去与未来的相似性，如果数据是平稳的，那么可以认为过去的数据表现出的某些性质，未 ...
分类：
其他好文 时间：
2020-02-22 14:09:27
阅读次数：
62
1 目标客户的特征分析 在目标客户的典型特征分析中，业务场景可以是试运营之前的虚拟特征探索（来源历史数据模拟推测），也可以是试运营之后来自真实运营数据基础上的分析、挖掘和提炼，两者目标一致，只是思路不同、数据来源不同而已。另外，分析技术也有一定的差异。 2 目标客户的预测（响应、分类）模型 这里的预 ...
分类：
其他好文 时间：
2020-02-20 13:20:42
阅读次数：
106
创建 一个 shell 文件 looprtask.sh 添加内容 如下： EXPORT_START_DATE=$1EXPORT_END_DATE=$2 #parameter example#EXPORT_START_DATE=2019-01-01 #EXPORT_END_DATE=2019-01-0 ...
分类：
系统相关 时间：
2020-02-13 12:32:32
阅读次数：
124
