原文博客: 羞羞的node爬虫 前言 学了一阵子node,除了用 express 写东西,就没怎么做过东西突然就想写个 爬虫 来玩一玩,而且还是爬一些羞羞的东西 使用模块 SuperAgent 是个 http 方面的库,可以发起 get 或 post 请求。 cheerio 大家可以理解成一个 No ...
分类:
其他好文 时间:
2020-03-14 14:29:44
阅读次数:
72
flume 启动agent报No appenders could be found for logger的解决 ...
分类:
移动开发 时间:
2020-03-14 11:10:42
阅读次数:
63
在BIOS中开启如下两个选项: Advanced --> CPU Configuration --> Intel Vertualization Technology 设为 Enabled Advanced --> System Agent (SA) Configuration --> VT-d 设为 ...
分类:
其他好文 时间:
2020-03-14 10:36:31
阅读次数:
119
1.创建爬虫 1 cmd-cd desktop scrapy startproject top250 View Code 2.修改访问表头UA 将setting文件里的USER_AGENT和COOKIES_ENABLED前面的#去掉 3.定义item容器 1 # -*- coding: utf-8 ...
分类:
编程语言 时间:
2020-03-13 21:00:27
阅读次数:
82
1.1 项目环境介绍 1、项目图解 2、项目目录结构说明 项目地址:https://gitee.com/edushiyanlou/django-docker django-docker ## 项目根路径 │ .gitignore # git忽略不上传的文件 │ docker-compose.yml ...
分类:
数据库 时间:
2020-03-13 01:13:50
阅读次数:
79
安装zabbix监控系统需要至少安装四个组件,分别是zabbix_server、zabbix_web、database、zabbix_agent 这里设置server服务端为:192.168.204.135 agent端为:192.168.204.136 一、server端配置步骤: 1.zabbi ...
分类:
其他好文 时间:
2020-03-13 01:13:22
阅读次数:
65
import requests from lxml import etree url_domain="https://www.dytt8.net" headers={ "User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537 ...
分类:
Web程序 时间:
2020-03-12 12:49:30
阅读次数:
91
获取时间戳 时间格式为:2017-12-12 12:00:00在苹果上获取时间戳有兼容性问题 需要转换成2017/12/12 12:00:00 才可以正确获取到时间戳 var getTime=function(time){ var myDate = new Date(time); var u = n ...
分类:
移动开发 时间:
2020-03-11 12:39:24
阅读次数:
176
注:本文基于https://blog.51cto.com/14227204/2474670一、监控主机内存使用情况1、在服务器上部署agent客户端[root@agent/]#mkdir/zabbix#个人习惯,可忽略[root@agent/]#cd/zabbix/[root@agent/]#rz[root@agentzabbix]#tarzxfzabbix-3.2.1.tar.gz[root@a
分类:
其他好文 时间:
2020-03-10 12:14:58
阅读次数:
62
PC端: Python莫言:https://www.cnblogs.com/Python-XiaCaiP/p/12448041.html PC_USER_AGENT = [ 'Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)', 'Mozilla/ ...
分类:
编程语言 时间:
2020-03-09 13:53:08
阅读次数:
117