Scrapy爬虫(三):scrapy架构及原理 Scrapy爬虫三scrapy架构及原理 scrapy爬虫尝鲜 scrapy data flow流程图 scrapy项目结构 scrapy爬虫尝鲜 scrapy现在已经完美支持python3+,所以后面的实例我都会使用python3+的环境。首先我们来 ...
分类:
其他好文 时间:
2020-10-31 01:09:06
阅读次数:
16
一、前言 之前的物联网篇,有介绍过用户手机APP或在H5端,可以作为mqtt的客户端,通过tcp:1883或者Websocket:8083,连接到EMQ Broker上,订阅设备的主题,从而收到设备上报的数据。但是,在处理工业物联网的时候,会出现,物联网平台会对接客户自己的应用。设备上报与下发都是通 ...
分类:
Web程序 时间:
2020-10-30 13:11:16
阅读次数:
28
#firewall-cmd--zone=public--list-ports#firewall-cmd--zone=public--add-port=30000-30020/tcp--permanent#firewall-cmd--reload
分类:
系统相关 时间:
2020-10-30 13:01:28
阅读次数:
22
开始之前我只买了个mysql,用node链接,这里我选用koa框架去写请求。可以达到查询效果,这里仅仅给了一个例子。 中间我遇到端口占用的问题,6000端口被TCP端口占用,我一直以为是我的写法问题,后来发现端口占用,你也赶紧看看吧 ...
分类:
数据库 时间:
2020-10-30 12:10:22
阅读次数:
28
TCP的三次握手和四次握手TCP三次握手?在一些文化中,两个人见面时常常通过握手来问好。双方都把握手的行为理解为友好问候的信号。网络中的连接是类似的。第一次握手请求同步。第二次握手确认初始同步请求,并同步相反方向上的连接参数。第三次握手网段是一次确认,用于通知目标两端同意建立连接。?当两台主机采用TCP协议进行通信时,在交换数据前将建立连接。通信完成后,将关闭会话并终止连接。连接和会话机制保障了T
分类:
其他好文 时间:
2020-10-30 12:02:25
阅读次数:
20
最近在做公司项目登录模块的性能测试,用的工具是jmeter,经常会遇到类似如下问题:Addressalreadyinuse:connect或者:connecttimeout网上查阅相关资料获悉windows提供给TCP/IP链接的端口为1024-5000,并且要四分钟来循环回收它们,就导致我们在短时间内跑大量的请求时将端口占满了,导致如上报错。这算是性能测试中常见的网络瓶颈问题在性能测试中,网络问
分类:
其他好文 时间:
2020-10-27 11:47:49
阅读次数:
28
Win10防火墙虽然能够很好地保护我们的系统,但同时也会因限制了某些端口,而给我们的操作带了一些不便。对于既想使用某些端口,又不愿关闭防火墙的用户而言,在Win10系统中设置防火墙开放特定端口就非常必要了。下面,小编就向大家分享具体方法。 操作步骤: 1、WIN+X调出系统配置菜单,选择控制面板; ...
前言 今天和大家聊的是一个比较基础的问题,OSI七层模型和TCP/IP四层模型。 小伙伴们可能有疑问,这个东西还用写文章吗,太基础了吧,网上文章多的是,随便一搜索就能找到。 确实是这样,网上资料确实很多,但是如果面试官问你这个问题,你能很好的回答上这个问题吗? 本文就是用大白话来聊一聊这个话题,让你 ...
分类:
其他好文 时间:
2020-10-24 11:46:54
阅读次数:
32
1.Socket和TCP/IP的关系 "All problems in computer science can be solved by another level of indirection." 为满足应用层需求,系统对TCP/IP层进行细节屏蔽和抽象,Socket层就相当于TCP/IP和应用 ...
分类:
系统相关 时间:
2020-10-21 21:04:10
阅读次数:
40
漏洞原理 HTTP慢速攻击也叫slow http attack,是一种DoS攻击的方式。由于HTTP请求底层使用TCP网络连接进行会话,因此如果中间件对会话超时时间设置不合理,并且HTTP在发送请求的时候采用慢速发HTTP请求,就会导致占用一个HTTP连接会话。如果发送大量慢速的HTTP包就会导致拒 ...
分类:
Web程序 时间:
2020-10-21 21:01:27
阅读次数:
35