转：https://www.cnblogs.com/mengmeng89012/p/5519698.html 这次带来的是spring boot + redis 实现session共享的教程。 在spring boot的文档中，告诉我们添加@EnableRedisHttpSession来开启spri ...
分类：
编程语言 时间：
2018-05-06 21:25:31
阅读次数：
181
一.基本原理： Scrapy-Redis则是一个基于Redis的Scrapy分布式组件。它利用Redis对用于爬取的请求(Requests)进行存储和调度(Schedule)，并对爬取产生的项目(items)存储以供后续处理使用。scrapy-redi重写了scrapy一些比较关键的代码，将scra ...
分类：
系统相关 时间：
2018-05-03 16:29:55
阅读次数：
574
redis开创了一种新的数据存储思路，使用redis，我们不用在面对功能单调的数据库时，把精力放在如何把大象放进冰箱这样的问题上，而是利用redis灵活多变的数据结构和数据操作，为不同的大象构建不同的冰箱。redis常用数据类型 redis最为常用的数据类型主要有以下五种：stringhashlis ...
分类：
其他好文 时间：
2018-04-30 10:20:28
阅读次数：
212
1、要求：python基础，python web框架的了解，web.py\flask\django等，爬虫框架scrapy的基础，html解析技术bs\xpath等 2、设计爬虫策略 3、反爬虫处理，模拟浏览器，使用代理ip等 4、分布式爬虫 scrapy-redis，利用redis对url去重，存 ...
分类：
编程语言 时间：
2018-04-09 21:48:09
阅读次数：
196
场景：比如说我们要实现一个集群环境，无非是把多个项目部署到多个tomcat下，然后按照一定的算法，轮询什么的随机访问多个tomcat服务器，但是问题也会有许多，比如说，我们最开始是把登陆人的信息存放到session中，但是如果是集群的情况下，比如我第一次登陆，把信息存放到session里面，但是我第 ...
分类：
其他好文 时间：
2018-04-07 14:03:06
阅读次数：
176
最近维护一个项目。每次改完东西，都要上传到服务器。然后有时候就忘记一些东西，于是就想有没有可以方法能监听文件的改变。然后我再利用程序把更改的文件一键上传到服务器。 于是就找到了nodejs 的chokidar模块。 然后利用redis的set集合。因为我们频繁更改。如果用普通的字符 会增加比较。se ...
分类：
其他好文 时间：
2018-04-04 21:20:10
阅读次数：
468
原文：http://liaoke0123.iteye.com/blog/2375469 利用redis实现分布式锁，网上搜索的大部分是使用java jedis实现的。 redis官方推荐的分布式锁实现为redisson http://ifeve.com/redis-lock/ 以下为spring b ...
分类：
编程语言 时间：
2018-03-19 13:44:05
阅读次数：
660
SSM：是Spring+Struts+Mybatis ，另外还使用了PageHelper 前言: 这里主要是利用redis去做mybatis的二级缓存，mybaits映射文件中所有的select都会刷新已有缓存，如果不存在就会新建缓存，所有的insert，update操作都会更新缓存。(这里需要明白 ...
分类：
其他好文 时间：
2018-03-13 15:46:54
阅读次数：
838
这里是用redis的list集合开发,redis的list集合是具有原子性的,不必担心多线程时会取到重复的数据,即使请求同时到达也会排队进行数据操作 1. 先说说大概思路,关于数据库库存字段的设计.数据类型设置为非负数的unsigned, 如果秒杀的商品数量为50个. 秒杀开始前在redis里面建一 ...
分类：
其他好文 时间：
2018-02-07 19:48:59
阅读次数：
155
爬虫学习到今天也告一段落了,利用一个项目把自己这几个月的所学的知识来做一次总结 项目所需要的知识比较全面,很适合练手, 一 程序目的 爬取拉钩全站的职位信息存入mysql和mongodb中 二 所用到的方法 一 利用selenium登录拉钩取得cookies 二 利用redis保存selenium登 ...
分类：
其他好文 时间：
2018-02-05 17:08:37
阅读次数：
142
