1. Scrapy使用了Twisted异步网络库来处理网络通讯,整体架构: Scrapy爬虫框架主要由5个部分组成,分别是:Scrapy Engine(Scrapy引擎),Scheduler(调度器),Downloader(下载器),Spiders(蜘蛛),Item Pipeline(项目管道)。爬 ...
分类:
其他好文 时间:
2020-06-26 10:21:18
阅读次数:
58
Node.js是什么 Node.js is a javascript runtime built on Chormes's V8 javaScript engine Node.js 不是一门语言 Node.js 不是库,不是框架 是javaScript运行时环境 简单点来讲node.js可以解析和执 ...
分类:
其他好文 时间:
2020-06-26 01:43:16
阅读次数:
88
目录 前言 What is a game engine? 游戏引擎破蛋史——游戏界的工业革命 游戏引擎的发展 3D引擎的真正诞生 游戏引擎的商品化 引擎大飞跃 后话 前言 接锅辣~ 前几天Nova常务组的组长(也就是我大哥)来找我,问我是不是大多数课程结课了。我心里一惊!哎呀,不会是独游的集训要开始 ...
分类:
其他好文 时间:
2020-06-25 21:53:15
阅读次数:
51
表结构 CREATE TABLE `test2` ( `id` varchar(32) DEFAULT NULL, `prarentid` varchar(32) DEFAULT NULL, `name` varchar(255) DEFAULT NULL ) ENGINE=InnoDB DEFAU ...
分类:
编程语言 时间:
2020-06-25 12:00:09
阅读次数:
207
图中绿色的是数据的流向 我们看到图里有这么几个东西,分别是 Spiders:爬虫,定义了爬取的逻辑和网页内容的解析规则,主要负责解析响应并生成结果和新的请求 Engine:引擎,处理整个系统的数据流处理,出发事物,框架的核心。 Scheduler:调度器,接受引擎发过来的请求,并将其加入队列中,在引 ...
分类:
其他好文 时间:
2020-06-25 11:58:04
阅读次数:
46
Sql建表语句 CREATE TABLE `person` ( `pid` varchar(32) NOT NULL, `name` varchar(255) DEFAULT NULL ) ENGINE=InnoDB DEFAULT CHARSET=utf8; CREATE TABLE `t_use ...
分类:
数据库 时间:
2020-06-25 11:41:48
阅读次数:
100
作者:jasonGeng88 www.github.com/jasonGeng88/blog 打开这篇文章的同学,想必对 docker 都不会陌生。docker 是一种虚拟容器技术,它上手比较简单,只需在宿主机上起一个 docker engine,然后就能愉快的玩耍了,如:拉镜像、起容器、挂载数据、 ...
分类:
Web程序 时间:
2020-06-24 17:54:29
阅读次数:
67
Nginx的产生 没有听过Nginx?那么一定听过它的"同行"Apache吧!Nginx同Apache一样都是一种WEB服务器。基于REST架构风格,以统一资源描述符(Uniform Resources Identifier)URI或者统一资源定位符(Uniform Resources Locato ...
分类:
其他好文 时间:
2020-06-24 15:45:10
阅读次数:
76
目录如下: 1)编写外部文件manager from app import app from app.models import Todo from flask.ext.script import Manager manager = Manager(app) @manager.command def ...
分类:
其他好文 时间:
2020-06-24 14:13:04
阅读次数:
58