爬虫是个好东西,一直都是。 只是,“好”的定义却在发生着变化。 (以下纯属个人意见,不喜勿喷) 爬虫的简单定义,就是使用程序自动从网站中获取信息。 获取信息做什么?这就因人而异了。 有人用来做搜索引擎,一般情况下是造福人类。 有人用来做数据分析,有时候是兴趣、有时候是手段。 有人用来做DDOS,一般 ...
分类:
其他好文 时间:
2019-05-19 13:58:09
阅读次数:
83
简介 通过HttpClient获取网页数据源,通过Jsoup解析数据。先模拟登录,再获取信息。模拟浏览器正常操作,封装请求头信息获取SESSIONID。模拟登录成功后切勿断开会话,依赖登录请求得到的Cookie进行二次请求。请求信息时需打开谷歌浏览器或Fiddler抓包查看参数及请求头信息。 Mav ...
1. 作用: 同步mysql;做拉链表;更新redis 某些情况无法从日志中获取信息,而又无法利用sqoop等ETL工具对数据实时的监控 2. canal的工作原理: canal的工作原理很简单,就是把自己伪装成slave,假装从master复制数据。 3. mysql的binlog MySQL的二 ...
分类:
其他好文 时间:
2019-05-12 17:08:09
阅读次数:
698
'''面向对象编程: 1. POP, OOD, OOP 2. 类与实例 3. 继承: 单继承, 接口继承与多态, 多继承 4. 封装 5. 反射(获取信息, 命令分发, 动态加载模块)''' # 综述'''POP & OOD & OOP: 1. POP(Process Oriented Progra ...
分类:
编程语言 时间:
2019-05-09 13:24:07
阅读次数:
134
[TOC] Exp6 信息搜集与漏洞扫描 一、实践原理 1. 间接收集 概念:不接触目标 无物理连接 不访问目标 方法:使用第三方信息源如 whois(查询域名信息) zoomeye(查询主机信息) 站长之家(查询网站注册信息) 等等 2. 直接收集 概念:建立物理连接或逻辑连接获取信息 方法: 主 ...
分类:
其他好文 时间:
2019-04-27 21:04:55
阅读次数:
177
信息搜集与漏洞扫描 实践目标 掌握信息搜集的最基础技能与常用工具的使用方法。 基础知识 间接:不接触目标,无直接连接访问,使用辅助模块进行收集分析 DNS:执行各种相关查询 搜索引擎 直接:建立逻辑连接并获取信息,对目标的开放端口扫描 MSF NMAP 社会工程学 漏洞扫描 openVAS 实验报告 ...
分类:
其他好文 时间:
2019-04-27 00:23:39
阅读次数:
170
PC机和服务器通过交换机相连接,当交换机出现故障导致PC机无法从服务器获取信息就会导致网络无法访问。此时增加冗余链路解决这个问题,但同时会引发广播风暴、多帧复制和MAC地址表不稳定等现象影响网络正常运行。生成树就解决了这个问题,生成树协议是一种二层管理协议,它通过有选择性地阻塞网络冗余链路也就是“主要链路正常时,断开备份链路;主要链路故障时,启用备份链路”来达到消除网络二层环路的目的。
分类:
其他好文 时间:
2019-04-21 09:47:17
阅读次数:
234
; <<>> DiG 9.9.5-3ubuntu0.6-Ubuntu <<>> baidu.com dig这个程序的版本号和要查询的域名 ;; global options: +cmd 表示可以在命令后面加选项 ;; Got answer: 以下是获取信息的内容 ;; ->>HEADER<<- op ...
分类:
其他好文 时间:
2019-04-11 16:39:28
阅读次数:
125
什么是反射 JAVA反射机制是在运行状态中,对于任意一个类,都能够知道这个类的所有属性和方法;对于任意一个对象,都能够调用它的任意一个方法;这种动态获取信息以及动态调用对象的方法的功能称为java语言的反射机制。反射 就是将java类中的各种成分映射成一个个的Java对象。 java反射框架提供的功 ...
分类:
编程语言 时间:
2019-04-05 00:30:43
阅读次数:
158
Zabbix监控软件重要组件ZabbixServer:负责接收组件Databasestorage:负责存储收集的信息Webinterface:图形界面接口Proxy:分布式组件,可选安装Agent:负责收集被监控端的信息并传给Serverzabbix进程zabbix_agentd:C守护进程,负责收集传送zabbix_get:S端手动获取C信息程序zabbix_sender:C手动上传信息zabb
分类:
其他好文 时间:
2019-04-02 14:20:14
阅读次数:
157