实现思路： 由于反扒机制，所以需要做代理切换，去爬取，内容通过BeautifulSoup去解析，最后入mysql库 1.在西刺免费代理网获取代理ip，并自我检测是否可用 2.根据获取的可用代理ip去发送requests模块的请求，带上代理 3.内容入库 注：日志模块在上一篇随笔 下面附上代码 1.可 ...
分类：
数据库 时间：
2018-10-19 13:57:30
阅读次数：
366
RXC方案与Replication方案的对比： RXC采用同步复制，事务在所有集群节点要么同时提交，要么不提交 Replication采用异步复制，无法保证数据的一致性 RXC镜像下载 docker官方仓库：https://hub.docker.com docker创建内部网段 docker卷:容器 ...
分类：
数据库 时间：
2018-10-07 13:03:01
阅读次数：
364
同一个页面用Js和服务器验证控件OnClientClick提交问题 实现功能： 点击Button按钮的OnClientClick事件，不会影响服务器验证控件的验证功能 （验证不通过，则不提交服务器页面）背景： 1. 在同一个页面有服务器验证控件(RegularExpressionValidator) ...
分类：
其他好文 时间：
2018-10-05 18:59:45
阅读次数：
285
事务是一个工作单元，可能包含查询和修改数据以及修改数据定义等多个活动。我们可以显式或隐式的定义事务边界。可以使用BEGIN TRAN或者BEGIN TRANSACTION语句显式的定义事务的开始。如果希望提交事务，可以使用COMMIT TRAN语句显式的定义事务结束。如果不希望提交事务（即要撤销更改 ...
分类：
数据库 时间：
2018-10-02 20:36:11
阅读次数：
178
CentOS 7 搭建PXC 数据库集群 PXC( Percona XtraDB Cluster ) 特点如下: 1.同步复制，事务要么在所有节点提交或不提交,保证了数据的强一致性。 2.多主复制，可以在任意节点进行写操作。 3.在从服务器上并行应用事件，真正意义上的并行复制。 Percona 下载 ...
分类：
数据库 时间：
2018-09-10 21:53:32
阅读次数：
324
开发经理不仅要保证自己工作做好，还要尽可能的少让团队欠技术债。在带领团队完成既定目标的同时，尽可能更高效更有生产力；在自己成长的同时也帮助团队成员一起成长。 开发经理太忙时可以自己不写代码，但一定不能放弃代码的控制权，可以不提交代码，但一定要查看团队成员代码提交记录，做好关键代码的审核，保证主要业务 ...
分类：
其他好文 时间：
2018-09-09 14:44:57
阅读次数：
121
本篇讲诉数据库中事务的四大特性（ACID），并且将会详细地说明事务的隔离级别。 如果一个数据库声称支持事务的操作，那么该数据库必须要具备以下四个特性： ⑴ 原子性（Atomicity） 原子性是指事务包含的所有操作要么全部成功，要么全部失败回滚，这和前面两篇博客介绍事务的功能是一样的概念，因此事务的 ...
分类：
数据库 时间：
2018-08-26 18:34:31
阅读次数：
179
特性背景消息事务是指一系列的生产、消费操作可以要么都完成，要么都失败，类似数据库的事务。这个特性在0.10.2的版本是不支持的，从0.11版本开始才支持。华为云DMS率先提供Kafka1.1.0的专享版服务，支持消息事务特性。支持事务消息有什么作用？消息事务是实现分布式事务的一种方案，可以确保分布式场景下的数据最终一致性。例如最常用的转账场景，小王转账到小明，实际操作是小王账户减去相应金额，小明的
分类：
其他好文 时间：
2018-08-20 15:34:16
阅读次数：
236
在公司写项目，大部分都会用到 svn 或 git 提交代码到服务器。我们公司用的GIT，每个程序员有自己的独立分支，各写各的代码互不冲突，最终合并到主分支再解决相同代码冲突问题。这时候会遇到一些配置文件提交的问题，每个程序员在自己的电脑都有自己的环境，每个环境配置各不相同，这样导致提交代码的时候都把 ...
分类：
其他好文 时间：
2018-08-07 16:15:00
阅读次数：
243
说说如何做oracledatabase的sql审核：1.如何做到预先的语法检查呢首先要熟悉繁杂的oracle语法规范，并能提前报错（这不是问题）2.DDL语句列的检查，索引的检查这些是直接执行才会发现的，难道要把表的结构全部导出来，操作检查一遍吗（貌似可行）那么要准备一个存储其他库表结构的oracledatabase3.DML语句如何检查数据冲突呢？可以使用不提交事物的方式检查，但如果碰到大量数据
分类：
数据库 时间：
2018-08-01 18:19:40
阅读次数：
287
