码迷,mamicode.com
首页 > 2018年05月11日 > 全部分享
python3 分布式爬虫
背景 部门(东方IC、图虫)业务驱动,需要搜集大量图片资源,做数据分析,以及正版图片维权。前期主要用node做爬虫(业务比较简单,对node比较熟悉)。随着业务需求的变化,大规模爬虫遇到各种问题。python爬虫具有先天优势,社区资源比较齐全,各种框架也完美支持。爬虫性能也得到极大提升。本次分享从基 ...
分类:编程语言   时间:2018-05-11 20:02:06    阅读次数:185
如何使用RestTemplate访问restful服务
https://www.jianshu.com/p/c9644755dd5e 一. 什么是RestTemplate 传统情况下在java代码里访问restful服务,一般使用Apache的HttpClient。不过此种方法使用起来太过繁琐。spring提供了一种简单便捷的模板类来进行操作,这就是Re ...
分类:其他好文   时间:2018-05-11 17:34:45    阅读次数:211
2017湘潭大学邀请赛E题(贪心)
链接:https://www.icpc.camp/contests/4mYguiUR8k0GKE Partial Sum Input The input contains zero or more test cases and is terminated by end-of-file. For ea ...
分类:其他好文   时间:2018-05-11 17:34:39    阅读次数:199
JavaScript 函数节流
其实最早看设计模式是单纯的了解js语言本身;所以看了理解了之后还是容易忘记;可能之后实际的工作需要才能记住吧; 看下面:<!DOCTYPE html> 上述情况,浏览器大概每秒会检查到10次左右的窗口变化;显然对性能不利; 下面看一个节流函数做的处理: 通过把要执行的函数传入到节流函数中,达到效果; ...
分类:编程语言   时间:2018-05-11 17:34:31    阅读次数:955
AngularJS学习笔记(2)——与用户交互的动态清单列表
与用户交互的动态清单列表 以我之前写的一个清单列表页面作为例子(MVC模式的清单列表效果),优化前代码如下: 效果如下: 优化过程 1.使复选框状态与布尔值同步(双向模型绑定) 想要为Done属性添加复选框,并与true/false的值同步,即达到以下效果: 点击复现框会使右侧true/false的 ...
分类:Web程序   时间:2018-05-11 17:34:23    阅读次数:233
IdentityServer4使用EFCore生成MySql时的小bug
EFCore生成PersistedGrantDbContextModelSnapshot的时候发现 最大长度是50000然而在 InitialIdentityServerPersistedGrantDbMigration中 这样会导致IdentityServer4中的 persistedgrants ...
分类:数据库   时间:2018-05-11 17:34:15    阅读次数:791
算法: Reverse Bits 反转位收藏
Reverse Bits Reverse bits of a given 32 bits unsigned integer. For example, given input 43261596 (represented in binary as 000000101001010000011110100 ...
分类:编程语言   时间:2018-05-11 17:34:08    阅读次数:170
AngularJS学习笔记(3)——通过Ajax获取JSON数据
通过Ajax获取JSON数据 以我之前写的与用户交互的动态清单列表为例,使用JSON前todo.html代码如下: 效果图如下: 现在把模型model内的items中的值单独写成一个JSON文件,再通过发起Ajax请求的方式获取JSON数据。 1.把todo.html文件内的模型model去除直接定 ...
分类:Web程序   时间:2018-05-11 17:33:58    阅读次数:222
C++ 接配器(Adapter)总结
近日在看《STL源码解析》,STL里面一大堆泛型编程的确是非常巧妙,不过由于时间有限,我还是只能更加专注于日常使用比较多的一些知识。 Adapter是我在最开始使用STL Container的时候就听到的一个词,一直以来没有比较深入的了解,借着这次学习STL源码,在这里总结一下: 首先是Adapte ...
分类:编程语言   时间:2018-05-11 17:33:52    阅读次数:258
Tomcat 安装配置
Tomcat7.0.22在Windows下详细配置过程 一、JDK1.7安装 1、下载jdk,下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk-7u1-download-513651.html 2、添加系统环境变量,我的 ...
分类:其他好文   时间:2018-05-11 17:33:44    阅读次数:139
快速排序
算法概述 一、分而治之 什么十快速排序算法的最好情况? 每次正好中分:T(N) = O(NlogN) void Quicksort(ElementType A[], int N) { pivot = 从A[]中选一个主元; 将S = { A[] \ pivot } 分成2个独立子集: A1 = { ...
分类:编程语言   时间:2018-05-11 17:33:30    阅读次数:195
wireshark
ctrl+fip.addr==192.168.0.1ctrl+nctrl+fip分片mtu1500二层2000字节呢,分片大于1500flags0x00分片偏移量抓包过滤器srchost192.168.1.1&&dstport80抓取地址为192.168.1.1的,目的地址为80的流量host192.168.1.1||host192.168.1.2抓取192.168.1.1和192
分类:其他好文   时间:2018-05-11 17:33:21    阅读次数:164
mysql 约束条件
本章介绍:MySQL 针对表的详细操作以及约束条件 创建表的完整语法: create table 表名( 字段名 类型 , [(宽度)约束条件]); #类型决定存储性质 char 属性为字符串宽度为1 是存储限制 #比如输入字符为 xy 只会存储x 可以进行调整来增加字符长度 约束条件: not n ...
分类:数据库   时间:2018-05-11 17:33:14    阅读次数:217
【IntellJ IDEA】idea启动测试类报错Error running 'Test1.test': Command line is too long. Shorten command line for Test1.test or also for JUnit default configuration.
idea启动测试类报错 解决方法: 1.打开本项目的.idea文件夹,找到文件夹中的workspace.xml文件 2.搜索 3.在这个父级结构中添加 4.保存以后 右键测试方法,查看效果,如果依旧有 问题,则设置 5.效果如下 ...
分类:其他好文   时间:2018-05-11 17:33:05    阅读次数:5007
初始化Windows虚拟机(KVM)的网卡IP
      新创建的Windows虚拟机如果不能通过DHCP获取IP,我们就需要登录到虚拟机内手动配置,很麻烦。这个工作能自动化最好,为Windows虚拟机进行初始化通常有两种思路:1.        通过cloudbase-init,这个是cloud-init的Windows版本。Cloudbas
分类:Windows程序   时间:2018-05-11 17:32:57    阅读次数:398
RIP概述、原理详解及实验验证
RIP路由协议一.路由类型:直连路由——设备直连的网络默认路由静态路由——管理员手动配置的路由动态路由(IGP)internalgatewayprotocol1.DV—距离矢量路由协议——RIPIGRPEIGRP2.LS—链路状态路由协议——ISISOSPF二.RIP:路由信息协议RIP概述:是一应用层协议—距离矢量路由协议,端口号UDP520。用来在“直接相连的路由器之间”互相传递路由条目,利用
分类:其他好文   时间:2018-05-11 17:32:49    阅读次数:214
windows10远程桌面——函数不受支持,这可能是由于 CredSSP 加密 Oracle
前言:因windows10的更新,最近很多朋友会遇到mstsc远程连接桌面报错:有如下解决方法:1、windows10企业版解决方式:按“win+R”,运行gpedit.msc,找:“计算机配置”->“管理模板”->“系统”->“凭据分配”,这里面有个“加密Oracle修正”,按图修改即可;2、windows10家庭版版解决方式:按“win+R”,运行regedit,找HKEY_
分类:数据库   时间:2018-05-11 17:32:40    阅读次数:9534
1359条   上一页 1 ... 34 35 36 37 38 39 40 ... 80 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!