在jiava中InputStream跟OutputStream分别代表输入流跟输出流，接下来来看一下IO的相关操作 首先来看一下如何操作文件 import java.io.File; import java.io.FilenameFilter; import java.nio.file.Path; ...
分类：
编程语言 时间：
2020-01-09 20:51:29
阅读次数：
86
本篇文章主要是对asyncio和相关内容的补充, 以及一个异步爬虫实例. 这个系列还有另外两篇文章: 从零开始学asyncio(上) 从零开始学asyncio(中) 一. 使用同步代码 上一篇文章已经讲到, 使用asyncio模块的基本套路是, 把要执行的代码写成协程函数的形式, 在函数内部IO操作 ...
分类：
其他好文 时间：
2020-01-08 20:54:28
阅读次数：
71
1、MapReduce跑的慢的原因 MapReduce程序效率的瓶颈主要在于两点： 1、机器性能不足（CPU、内存、磁盘健康、网络） 2、IO操作优化 数据倾斜 Map和Reduce数设置不合理 Map运行时间太长，导致Reduce等待的时间太久 小文件 大量不可切分的超大文件 spill溢写次数过 ...
分类：
其他好文 时间：
2020-01-08 00:46:53
阅读次数：
116
Redis服务端对于命令的处理是单线程的，但是在I/O层面却可以同时面对多个客户端并发的提供服务，并发到内部单线程的转化通过多路复用框架实现 一个IO操作的完整流程是数据请求先从用户态到内核态，也就是操作系统层面，然后再调用操作系统提供的API,调用相应的设备去获取相应的数据。 当相应的设备准备好数 ...
分类：
其他好文 时间：
2020-01-06 14:41:18
阅读次数：
261
[TOC] jwt认证 jwt 是 的缩写，是一种登录认证的认证方式 jwt认证和普通session认证的区别 1. session需要保存至服务端数据库中，而jwt服务器不需要存储token，服务器的IO操作会减少（没有IO写操作） 2. 由客户端存储token信息，服务端只存储签发和校验的算法， ...
分类：
其他好文 时间：
2020-01-06 00:39:31
阅读次数：
102
用yield实现协程 使用yield from实现的协程 async关键字不能和yield一起使用，引入coroutine装饰器来装饰downloader生成器。 await 操作符 后面必须跟一个awaitable对象 （通常用于等待一个会有io操作的任务 ） , 它只能在异步函数 内部使用 。 ...
分类：
其他好文 时间：
2020-01-02 20:25:32
阅读次数：
91
协程协程，又称微线程，纤程。英文名coroutine。简单说：协程是一种用户态的轻量级线程。协程拥有自己的寄存器上下文和栈。写成调度切换时，将寄存器上下文和栈保存到其他地方，在且回来的时候，恢复先前保存的寄存器上下文和栈。因此，协程能保留上一次调用时的状态（即所有局部状态的一个特定组合），每次过程重... ...
分类：
其他好文 时间：
2020-01-02 17:11:49
阅读次数：
135
[toc] RBAC 基于角色的访问控制 Role based Access Control JWT Json Web Token 优点 数据库不需要存储token, 所以服务器的IO操作会减少 客户端存token, 服务器只存储签发校验算法, 执行效率高 签发与校验算法在多个服务器上可以直接统一, ...
分类：
其他好文 时间：
2020-01-01 23:49:17
阅读次数：
97
cookie,session,token cookie 服务器端产生,保存不重要或认证信息,保存在客户端 session 服务器端产生,保存登录信息等重要信息,保存在服务端 token 服务端产生,保存认证信息,保存在客户端的cookie中 优点 + 数据库不需要存储token,所以服务器的IO操作 ...
分类：
其他好文 时间：
2020-01-01 23:34:51
阅读次数：
119
1.Socket 1.1、socket是一个应用编程接口，是一种特殊的文件描述符（可对其执行IO操作，open、write、close） 1.2、socket代表网络编程的一种资源 1.3、socket的类型 流式套接字（SOCK_STREAM）：唯一对应TCP 提供一个面向连接、可靠的数据传输服务 ...
分类：
系统相关 时间：
2020-01-01 18:41:10
阅读次数：
90
