一、解决方案 二、电商数据的爬取和清洗 2.1 Python爬取京东手机销售历史数据 1）.环境 python3 环境、第三方包有 scrapy，re Pycharm 、NotePad++、SublimeText 等代码编辑工具 2）.爬虫步骤 采用 scrapy 爬虫框架编写爬虫脚本，选取核心代码 ...
分类：
移动开发 时间：
2019-09-10 12:56:38
阅读次数：
143
什么是KSF，即关键成功因素法。KSF薪酬全绩效模式：基于以人为本的增值加薪方案（数据说话、结果导向、效果支付、价值分割、薪酬分割），绩效提取（包括KSF关键成功因素绩效）过程、指标、结果。在KSF的设计中，平衡点是历史数据有一个特殊的分析方向：1、最高点：在一年中的最高点查找数据。2、最低点：找到一年中的最低点。3、平均：对同一组数据进行平均计算。平均而言，这些数据可以在全年、淡季和旺季平均，并
分类：
其他好文 时间：
2019-09-10 01:11:00
阅读次数：
130
基本配置项 https://www.jianshu.com/p/bffca8128e8f 官方说这个实验性的功能支持es的版本是5.0.x 6.1.x，如果使用早期或更高版本的Elasticsearch，某些功能可能无法按预期工作。 测试环境的es版本是6.2.4，zabbix为4.0，也能完成za ...
分类：
其他好文 时间：
2019-09-07 17:17:28
阅读次数：
114
矢量化 矢量化指的是用数组代替标量来操作数组里的每个元素。 numpy提供了vectorize函数，可以把处理标量的函数矢量化，返回的函数可以直接处理ndarray数组。 numpy还提供了frompyfunc函数，也可以完成与vectorize相同的功能 案例：定义一种买进卖出策略，通过历史数据判 ...
分类：
其他好文 时间：
2019-09-06 12:52:59
阅读次数：
84
像用户的手机号，居住城市这些维度会变化的场景，会对用户维度表里面的数据造成影响，这种情况叫做缓慢变化维度。 1.需要跟踪最新变化，就更新数据为最新 2.需要保存历史数据的话， 就可以将主键设置为dwid 添加一个列 对应数据有效值（标识开始和过期时间） 3.维度需要的比较少的话，可以直接增加历史对应... ...
分类：
其他好文 时间：
2019-09-01 21:32:58
阅读次数：
216
分析针对{历史数据，每天的增量数据} 站长工具 seo 优化， pageRank http://seo.chinaz.com/www.taobao.com PV (page view ） UV(user view) 页面访问量，用户访问量 一针对增量数据进行分析。 设定淘宝300G/每天； 唯品会访... ...
分类：
其他好文 时间：
2019-08-25 14:02:37
阅读次数：
216
系统在使用jqGrid时，如果某些页面的查询项是复选框，后台是数组接收的，就会出现传值不正确问题。 1、项目中某查询页面存在的复选框：待处理S1，正在处理S2，已处理S3； 使用jqGrid提交查询数据方法如下： $("#xxTable").setGridParam({ datatype : "js ...
分类：
其他好文 时间：
2019-08-23 19:05:33
阅读次数：
216
JFR 是 JMC 中一个非常关键的功能。它记录了 JVM 所有事件的历史数据，通过这些数据，程序性能分析人员可以结合以往的历史数据对 JVM 性能瓶颈进行分析诊断。 JMC 还提供线程视图，I/O 视图，系统视图，所有的这些视图都是为了更好的分析 JFR 所记录的真实事件。 参考：https:// ...
分类：
其他好文 时间：
2019-08-22 14:43:49
阅读次数：
72
首先从东方财富网获取股票代码 再从网易财经下载股票历史数据 ...
分类：
其他好文 时间：
2019-08-19 11:15:17
阅读次数：
239
OPC是应用于工业通信的，在windows环境的下一种通讯技术，原有的通信技术难以满足日益复杂的环境，在可扩展性，安全性，跨平台性方面的不足日益明显，所以OPC基金会在几年前提出了面向未来的架构设计的OPC 统一架构，简称OPC UA，截止目前为止，越来越多公司将OPC UA作为开放的数据标准，在未 ...
