最近做项目时发现一个很好用的包——collections,这它是Python内建的一个集合模块,提供了许多有用的集合类,下面记录一些我觉得很有用的类或方法。1.CounterCounter可以帮我们直接计算出元素的数量importcollectionsdata1=[‘a‘,‘b‘,‘c‘,‘a‘,‘b‘,‘a‘]col_1=collections.Counter(data1)data2=‘pyth
分类:
其他好文 时间:
2018-03-05 20:49:38
阅读次数:
132
目前的线上数据库,分为主从两个库,从库用来做比较耗时的数据统计分析。 今天top了一下从库服务器,发现mysqld 在很长一段时间都占用105% cpu,一开始以为是从库在处理主库的binlog. 两分钟后,发现不对,单次主从同步不会超过5秒的。 进入mysql命令行 show full proce ...
分类:
数据库 时间:
2018-03-05 20:48:29
阅读次数:
187
通过统计数据库中的1000多个项目,我们发现在 JavaScript 中最常出现的错误有10个。下面会向大家介绍这些错误发生的原因以及如何防止。 对于这些错误发生的次数,我们是通过收集的数据统计得出的。Rollbar 会收集每个项目中的所有错误,并总结每个错误发生的次数,然后通过各个错误的特征进行分 ...
分类:
编程语言 时间:
2018-03-05 15:38:11
阅读次数:
298
目前后台数据库使用了一个实例做数据统计分析,随着数据井喷,单个实例无法做数据分析。故开始了读写分离。 1.主配置 2.检查bin-log日志记录 binlog-do-db 会影响到日志记录,这里用mysqlbinlog 检查日志是否拿到。 3.dump导出多个数据库并记录日志位置 -B 多个数据库 ...
分类:
数据库 时间:
2018-02-28 19:41:04
阅读次数:
211
在做数据统计的时候,行转列,列转行是经常碰到的问题。case when方式太麻烦了,而且可扩展性不强,可以使用 PIVOT,UNPIVOT比较快速实现行转列,列转行,而且可扩展性强 一、行转列 1、测试数据准备 CREATE TABLE [StudentScores] ( [UserName] NV ...
分类:
数据库 时间:
2018-02-23 13:25:43
阅读次数:
200
更新中。。。 本文是作者阅读《python数据分析与挖掘实战》(张良均等,2016年1月第1版,机械工业出版社)时,将几种数据统计图的python写法做一个笔记。 源代码来自书上,注释来自作者理解。为了方便日后使用,对源代码的更正或者改变部分就不另行说明了,谢谢支持。 准备:需要python2.7、 ...
分类:
编程语言 时间:
2018-02-22 19:45:49
阅读次数:
659
kibana安装 1.到官网下载kibana; 2、安装 3.修改配置文件 /etc/kibana/kibana.yml 这是链接es的http地址,kibana自身服务器默认的端口是5601. 4、启动 [root@es software]# /etc/init.d/kibana startkib ...
分类:
其他好文 时间:
2018-02-10 15:50:10
阅读次数:
233
1.HashMap、Hashtable不是有序的; 2.TreeMap和LinkedHashMap是有序的(TreeMap默认升序,LinkedHashMap则记录了插入顺序)。 今天做统计时需要对X轴的地区按照地区代码(areaCode)进行排序,由于在构建XMLData使用的map来进行数据统计 ...
分类:
编程语言 时间:
2018-02-08 20:16:07
阅读次数:
212
DHCP调试命令如下:Showipdhcppool查看地址池信息Showipdhcpbinding查看租约信息Showipdhcpconflict查看地址冲突信息Showipdhcpserverstatistics查看DHCP收发数据包统计表清除命令:Clearipdhcpserverstatist清除收发数据统计信息clearipdhcpbinding*清除所有租约信息
分类:
其他好文 时间:
2018-02-07 11:56:53
阅读次数:
181
网站统计中的数据收集原理及实现 网站数据统计分析工具是网站站长和运营人员经常使用的一种工具,比较常用的有谷歌分析、百度统计和腾讯分析等等。所有这些统计分析工具的第一步都是网站访问数据的收集。目前主流的数据收集方式基本都是基于javascript的。本文将简要分析这种数据收集的原理,并一步一步实际搭建 ...
分类:
Web程序 时间:
2018-02-04 17:58:55
阅读次数:
232