“大数据”作为时下最火热的IT行业的词汇，随之数据仓库、数据安全、数据分析、数据挖掘等等围绕大数量的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。大数据有多大，一直没有清晰的概念，故此简单的科普研究，分享至此： 下面先按顺序给出所有单位：Byte、KB、MB、GB、TB、PB、EB、ZB、YB、 ...
分类：
其他好文 时间：
2019-09-25 12:25:40
阅读次数：
82
一、互斥锁 进程之间数据隔离，但是共享一套文件系统，因而可以通过文件来实现进程直接的通信，但问题是必须自己加锁处理。 注意：加锁的目的是为了保证多个进程修改同一块数据时，同一时间只能有一个修改，即串行的修改，没错，速度是慢了，牺牲了速度而保证了数据安全。 1.上厕所的小例子：你上厕所的时候肯定得锁门... ...
分类：
编程语言 时间：
2019-09-23 22:31:32
阅读次数：
122
通过学习，我们使用各种方法实现了程序的异步，让多个任务可以同时在几个进程中并发处理，他们之间的运行没有顺序，一旦开启也不受我们控制。尽管并发编程让我们能更加充分的利用IO资源，但是也给我们带来了新的问题：当多个进程使用同一份数据资源的时候，就会引发数据安全或顺序混乱问题。 一、锁的基础使用 1.1多 ...
分类：
编程语言 时间：
2019-09-22 21:33:49
阅读次数：
182
Python程序中的线程操作 锁 一、同步锁 1.1多个线程抢占资源的情况 1.1.1对公共数据的操作 1.2同步锁的引用 1.3互斥锁与join的区别 有的同学可能有疑问:既然加锁会让运行变成串行,那么我在start之后立即使用join,就不用加锁了啊,也是串行的效果啊 没错:在start之后立刻 ...
分类：
编程语言 时间：
2019-09-22 19:37:36
阅读次数：
91
线程锁 当线程t1，刚拿到x，还未进行加值和赋值操作的时候，就被CPU切走了，这时t1的x保存的是刚拿到数据的状态；然后线程t2开始加值操作，当t2被CPU切走时，x已经加了很多次了，但是t1的x还是原来的数据，然后线程t1重新开始加值操作，还是用原先x的数据，造成了数据安全的问题， 所给线程加一把 ...
分类：
编程语言 时间：
2019-09-22 19:34:33
阅读次数：
100
前言 最近因业务需求在项目中嵌入了tinymce这个富文本编辑器，用于满足平台给用户编辑各类新闻内容什么的业务需求，前后也花了不少时间体验和对比了市面上各类开源编辑器。*案例demo版本：vue-tinymce-demo在线预览：vue-tinymce-demo.netlify.com/#/各大WY ...
分类：
其他好文 时间：
2019-09-21 10:43:47
阅读次数：
100
Redis主从复制机制 1、读写分离的好处 + 性能优化：主服务器专注于写操作，可以更适合写入数据的模式工作；同样，从服务器专注于读操作，可以用更适合读取数据的模式工作。 + 强化数据安全，避免单点故障：由于同步机制的存在，各个服务器之间的数据保持一致，所以其中某个服务器宕机不会导致数据丢失或无法访 ...
分类：
其他好文 时间：
2019-09-20 20:46:46
阅读次数：
97
回顾 5种反爬机制 robots.txt：反爬机制，防君子不防小人 UA检测：UA伪装 数据加密 图片懒加载 代理ip requests模块爬取流程： 指定url 发起请求 获取页面数据 数据解析 持久化存储 bs4解析： 环境安装：bs4、lxml解析器 实例化bs对象，将页面源码数据加载到该对象 ...
分类：
编程语言 时间：
2019-09-19 23:28:00
阅读次数：
178
Redis为持久化提供了两种方式： RDB：在指定的时间间隔能对你的数据进行快照存储。 AOF：记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始的数据。 本文将通过下面内容的介绍，希望能够让大家更全面、清晰的认识这两种持久化方式，同时理解这种保存数据的思路，应用于自己的系统设 ...
分类：
其他好文 时间：
2019-09-16 13:59:21
阅读次数：
105
```python """ 问题：当多个进程使用同一份数据资源的时候，就会引发数据安全或顺序混乱的问题 """ ''' 进程同步 ''' #多进程抢占输出资源 import os import time import random from multiprocessing import Proces... ...
分类：
编程语言 时间：
2019-09-15 18:19:46
阅读次数：
103
