要说现在什么工作赚钱的同时还比较有逼格,数据分析师可以说是其中之一。数据分析师算得上是一个新的职业,是伴随着大数据的不断发展而诞生的一个职业。做为一名数据分析师,主要的工作内容就是对大量数据进行及时准确的分析和整理,然后得出结论,进而对公司企业的发展以及决策提供帮助,不仅高薪,同时还比较的高端,属于... ...
分类:
其他好文 时间:
2019-03-12 18:46:18
阅读次数:
167
一、参考我之前的博客,Delphi可以很方便的把类和结构体转换成JSON数据,但是数据量大了,就会非常之慢,1万条数据需要20秒左右。如果引用Serializers单元,那么100万数据只需要4秒左右,每秒处理20万+,速度还是很快的。 二、写一个简单的类 二、写个100万的大循环,创建100万个类 ...
分类:
Windows程序 时间:
2019-03-09 01:14:10
阅读次数:
1141
摘自:https://www.cnblogs.com/qingyunzong/p/9004703.html 一、高可用的由来 1.1 为何需要Replication 在Kafka在0.8以前的版本中,是没有Replication的,一旦某一个Broker宕机,则其上所有的Partition数据都不可 ...
分类:
其他好文 时间:
2019-03-05 23:03:14
阅读次数:
225
当有业务需求需要一次性循环n条数据,插入或更新数据库时,如果单纯的循环,插入/更新,会消耗太多的数据库资源 一下是一种简单的解决方案 数据库的insert 是可以批量更新的,当有大量数据循环insert时,可以将数据先保留不执行插入命令,到最后一条时一次性插入,例如tp的addAll()方法; 数据 ...
分类:
Web程序 时间:
2019-03-05 19:57:58
阅读次数:
247
1.UDP通讯协议 UDP的使用 UDP在使用时需要修改socket的参数 第一个仍是 AF_INET 第二个 SOCK_DGGRAM 不需要建立连接 所以没有三次握手 四次挥手 1.修改sock的参数/2.不需要监听和接收请求 相同点: 服务器:都需要绑定 端口和ip recv与recvfrom都 ...
分类:
其他好文 时间:
2019-03-04 21:11:08
阅读次数:
226
索引对于在大量数据里检索出少量数据库的查询操作来说是高效的,可是对于DML操作来说。却是负面的:①其对于insert 操作的反面影响最大。该表的索引越多,更新的索引越多,insert 操作越慢。②对于delete来说。大量数据定位删除少量数据的时候。通过索引定位删除是高效的,但假设删除数据量过多,或 ...
分类:
数据库 时间:
2019-03-04 09:56:34
阅读次数:
186
场景1 如果主节点已经运行了一段时间,且有大量数据时,如何配置并启动slave节点 通过备份恢复数据至从服务器· 复制起始位置为备份时,二进制日志文件及其POS: Mater 设置 1) 修改配置文件 2) 备份出数据库,会自动刷新日志,查看bin 日志 3) 备份完成之后 随便创建点东西 或者空数 ...
分类:
数据库 时间:
2019-03-01 00:24:41
阅读次数:
240
1、什么是Zookeeper? Zookeeper是一个高效的分布式协调服务,暴露了一些公用服务,比如命名/配置管理/同步控制/群组服务等。 需要注意的是Zookeeper不适合存储大量数据,通常就存储一些配置信息。动态的监听服务器的变更并且反馈给服务器 Zookeeper是一个高可用的分布式管理与 ...
分类:
其他好文 时间:
2019-02-23 10:20:59
阅读次数:
193
分库分表理解 分库分表应用于互联网的两个场景;大量数据和高并发,通常策略有两种:垂直分库,水平拆分 垂直拆分:是根据业务将一个库拆分为多个库,将一个表拆分为多个表,例如:将不常用的字段和经常访问的字段分开存放,在实际开发由于跟业务关系紧密,所以一般采用水平拆分。 水平拆分:则是根据分片算法讲一个库拆 ...
分类:
数据库 时间:
2019-02-22 10:27:47
阅读次数:
408
https://www.jianshu.com/p/193fb966e954 一,背景 RecyclerView是谷歌官方出的一个用于大量数据展示的新控件,可以用来代替传统的ListView,更加强大和灵活。 最近,自己负责的业务,也遇到这样的一个问题,关于是否要将ListView替换为Recycl ...
分类:
其他好文 时间:
2019-02-21 21:41:49
阅读次数:
172