一 介绍 原来scrapy的Scheduler维护的是本机的任务队列（存放Request对象及其回调函数等信息）+本机的去重队列（存放访问过的url地址） 所以实现分布式爬取的关键就是，找一台专门的主机上运行一个共享的队列比如Redis，然后重写Scrapy的Scheduler，让新的Schedul ...
分类：
其他好文 时间：
2021-02-02 11:24:43
阅读次数：
0
1.创建多线程的第二种方式 //创建多线程的第二种方式 : 实现runnable接口 //1.创建子类实现runnable接口 class MyThread implements Runnable{ //2.重写run() @Override public void run() { for (int ...
分类：
编程语言 时间：
2021-01-28 11:43:15
阅读次数：
0
Java多线程 多线程的实现1 继承Thread 重写run() start() 1.为什么要重写run()方法？ 因为run()方法是用来封装线程要执行的代码的。 2.run()方法和start()方法的区别？ 直接使用run()方法并不是启动多线程，使用start()才是启动线程，然后由JVM调 ...
分类：
编程语言 时间：
2021-01-27 13:58:25
阅读次数：
0
在进行一对多配置后，在测试方法中尝试使用获取一方信息，结果出现了内存溢出的错误。 总结一下原因以及解决方案： 原因一：为了方便看信息,在两类中分别重写了 toString 方法,导致查询加载时两类在互相调用对方的toString,形成递归,造成内存溢出。解决方案： 在 toString 方法中任意一 ...
分类：
编程语言 时间：
2021-01-20 12:06:32
阅读次数：
0
一、多线程介绍 在编程中，我们不可逃避的会遇到多线程的编程问题，因为在大多数的业务系统中需要并发处理，如果是在并发的场景中，多线程就非常重要了。另外，我们在面试的时候，面试官通常也会问到我们关于多线程的问题，如：如何创建一个线程？我们通常会这么回答，主要有两种方法，第一种：继承Thread类，重写r ...
分类：
编程语言 时间：
2021-01-19 11:56:47
阅读次数：
0
重写 public class B { public static void test(){ System.out.println("B=>test()"); } } public class A extends B { public static void test(){ System.out.p ...
分类：
编程语言 时间：
2021-01-14 10:38:57
阅读次数：
0
重写都是方法的重写，和属性无关。 父类的引用可以指向子类。 静态的方法和非静态的方法区别很大。 重写：需要有继承关系，子类重写父类的方法。 1.方法名必须相同 2.参数列表必须相同 3.修饰符：范围可以扩大但不能缩小：public>protected>default>private 4.抛出的异常： ...
分类：
其他好文 时间：
2021-01-13 11:13:15
阅读次数：
0
继承、重写和 Super class Lady { content = "Hi，帅哥"; sayHello() { return this.content; } } class XiaoJieJie extends Lady { sayHello() { return super.sayHello( ...
分类：
其他好文 时间：
2021-01-12 11:03:38
阅读次数：
0
Spring JavaConfig 是 Spring 社区的产品，它提供了配置 Spring IoC 容器的纯 Java 方法。因此它有助于避免使用 XML 配置。使用 JavaConfig 的优点在于：面向对象的配置。由于配置被定义为 JavaConfig 中的类，因此用户可以充分利用 Java ...
分类：
编程语言 时间：
2021-01-08 11:46:37
阅读次数：
0
a、final可以修饰类、变量、方法，修饰类表示该类不能被继承、修饰方法表示该方法不能被重写、修饰变量表示该变量是一个 常量不能被重新赋值。 b、finally一般作用在try-catch代码块中，在处理异常的时候，通常我们将一定要执行的代码方法finally代码块中，表示不管是 否出现异常，该代码 ...
分类：
其他好文 时间：
2021-01-08 10:38:11
阅读次数：
0
