技术架构演变 随着互联网的发展，网站应用的规模不断扩大，常规的垂直应用架构已无法应对，分布式服务架构以及流动计算架构势在必行，亟需一个治理系统确保架构有条不紊的演进。 单一应用架构 当网站流量很小时，只需一个应用，将所有功能都部署在一起，以减少部署节点和成本。 此时，用于简化增删改查工作量的 数据访 ...
分类：
其他好文 时间：
2020-03-01 12:10:43
阅读次数：
97
[TOC] 一、scrapy简介，架构介绍 1.1scrapy简介 Scrapy一个开源和协作的框架，其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的，使用它可以以快速、简单、可扩展的方式从网站中提取所需的数据。但目前Scrapy的用途十分广泛，可用于如数据挖掘、监测和自动化测试等领域，也 ...
分类：
其他好文 时间：
2020-03-01 00:03:16
阅读次数：
94
[TOC] 常规检查 逆向分析 create_heap 函数 可以再次编辑 chunk 的内容，而且可以选择输入大小。如果我们这次输入的 size 比创建时大的话，就会导致堆溢出 delete 函数 释放对应 index 的 chunk，并将数组 heaparray 对应的地址置 0。 main 函 ...
分类：
其他好文 时间：
2020-02-25 17:42:36
阅读次数：
231
MySQL MHA架构介绍 MHA ( Master High Availability )目前在MySQL高可用方面是一个相对成熟的解决方案 ,它由日本DeNA公司youshimaton (现就职于Facebook公司)开发,是- 套优秀的作为MySQL高可用性环境 下故障切换和主从提升的高可用软 ...
分类：
数据库 时间：
2020-02-13 19:08:45
阅读次数：
83
MHA架构介绍MHA是MasterHighAvailability的缩写，它是目前MySQL高可用方面的一个相对成熟的解决方案，其核心是使用perl语言编写的一组脚本，是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中，MHA能做到在0~30秒之内自动完成数据库的故障切换操作，并且能在最大程度上保证数据的一致性，以达到真正意义上的高可用。基于MHA的
分类：
数据库 时间：
2020-02-02 01:25:18
阅读次数：
117
SignIn 2019_SUCTF __int64 __fastcall main(__int64 a1, char **a2, char **a3) { char mod; // [rsp+0h] [rbp-4A0h] char exp; // [rsp+10h] [rbp-490h] char ...
分类：
其他好文 时间：
2020-01-23 22:34:43
阅读次数：
565
系统架构介绍 整个实时监控系统的架构是先由 Flume 收集服务器产生的日志 Log 和前端埋点数据, 然后实时把这些信息发送到 Kafka 分布式发布订阅消息系统，接着由 Spark Streaming 消费 Kafka 中的消息，同时消费记录由 Zookeeper 集群统一管理，这样即使 Kaf ...
分类：
其他好文 时间：
2020-01-07 11:44:25
阅读次数：
100
1、基本组件栈 了解Spark的朋友会发现Flink的架构和Spark是非常类似的，在整个软件架构体系中，同样遵循着分层的架构设计理念，在降低系统耦合度的同时，也为上层用户构建Flink应用提供了丰富且友好的接口。 https://mmbiz.qpic.cn/mmbiz_png/mqibsuEhdU ...
分类：
其他好文 时间：
2020-01-06 22:31:20
阅读次数：
143
1. Scrapy框架 Scrapy功能非常强大，爬取效率高，相关扩展组件多，可配置和可扩展程度非常高，它几乎可以应对所有反爬网站，是目前Python中使用最广泛的爬虫框架。 1.1 Scrapy介绍 1.1.1 架构介绍 Scrapy是一个基于Twisted的异步处理框架，是纯Python实现的爬 ...
分类：
其他好文 时间：
2019-12-27 22:06:26
阅读次数：
104
Ansible架构模式 Ansible是由控制机和被管理机组成：控制机是用来安装Ansible工具软件和执行指令的服务器，被管理机是指运行业务的服务器，由控制机通过SSH进行管理。 Ansible管理方式 Ansible是一个模型驱动管理器，支持多节点发布，远程任务执行，默认使用SSH远程连接，无需 ...
分类：
其他好文 时间：
2019-12-22 18:16:23
阅读次数：
117
