码迷,mamicode.com
首页 > 其他好文
Scrapy Learning笔记(四)- Scrapy双向爬取
摘要:介绍了使用Scrapy进行双向爬取(对付分类信息网站)的方法。 所谓的双向爬取是指以下这种情况,我要对某个生活分类信息的网站进行数据爬取,譬如要爬取租房信息栏目,我在该栏目的索引页看到如下页面,此时我要爬取该索引页中的每个条目的详细信息(纵向爬取),然后在分页器里跳转到下一页(横向爬取),再爬... ...
分类:其他好文   时间:2016-04-15 13:36:22    阅读次数:1153
Canvas使用笔记
1.Canvas画布有外部尺寸和内部尺寸,外部尺寸是指画布在html页面里的大小,内部尺寸是指画布内部像素的值。一般默认是在下面这句 代码中的width属性和height属性上设置的,这时外部内部都是300X300.但是有时候也需要改版画布的大小。这时语句就是 ...
分类:其他好文   时间:2016-04-15 13:35:33    阅读次数:144
TJU_SCS_软件测试_lab2_Selenium
一. 实验要求 1、安装SeleniumIDE插件 2、学会使用SeleniumIDE录制脚本和导出脚本 3、访问http://www.ncfxy.com使用学号登录系统(账户名为学号,密码为学号后6位),进入系统后可以看到该用户的邮箱。 4、编写Selenium Java WebDriver程序, ...
分类:其他好文   时间:2016-04-15 13:35:16    阅读次数:290
String类的研究
public final class String implements java.io.Serializable, Comparable, CharSequence { /** The value is used for character storage. */ private final char value[]; /** The offset is the...
分类:其他好文   时间:2016-04-15 12:22:19    阅读次数:300
Freemarker继续学习
Freemarker类型:            支持的类型有:        标量:字符串、数字、布尔值、日期        容器:哈希表、序列、集        子程序:方法和函数、用户自定义指令         其他:节点         解释一下  容器  中  集  是一个什么概念:从模板设计者角度来看,集是有限制的序列。不能获取集的大小,也不能通过索引取出集...
分类:其他好文   时间:2016-04-15 12:22:22    阅读次数:196
Qt之图形(QPainter的基本绘图)
简述Qt中提供了强大的2D绘图系统,可以使用相同的API在屏幕和绘图设备上进行绘制,它主要基于QPainter、QPaintDevice和QPaintEngine这三个类。 QPainter用来执行绘图操作,其提供的API在GUI或QImage、QOpenGLPaintDevice、QWidget和QPaintDevice显示图形(线、形状、渐变等)、文本和图像。 QPaintDevice不直接绘制...
分类:其他好文   时间:2016-04-15 12:22:37    阅读次数:9212
LeetCode之17----Letter Combinations of a Phone Number
题目: Given a digit string, return all possible letter combinations that the number could represent. A mapping of digit to letters (just like on the telephone buttons) is given below. Input...
分类:其他好文   时间:2016-04-15 12:22:01    阅读次数:217
Spark学习
Spark运行原理自我理解: (1)      首先程序有RDD Objects分解为DAG有向无环图 (2)      提交DAGScheduler,根据shuffer将DAG分解为一组taskset,即stages (3)      Taskset提交TaskScheduler,每个taskset在分解为多个task,即一个task就是一个split分区 ...
分类:其他好文   时间:2016-04-15 12:21:40    阅读次数:552
gnuplot画图
gnuplot 画图的基本使用...
分类:其他好文   时间:2016-04-15 12:22:29    阅读次数:1624
activiti自定义流程之整合(五):启动流程时获取自定义表单
流程定义部署之后,自然就是流程定义列表了,但和前一节一样的是,这里也是和之前单独的activiti没什么区别,因此也不多说。我们先看看列表页面以及对应的代码,然后在一步步说明点击启动按钮时如何调用自定义的form表单。 流程定义列表页面如下: 对应的html代码: 流程列表 ID NAME ...
分类:其他好文   时间:2016-04-15 12:20:04    阅读次数:353
Drawable资源的初步使用
刚开始接触到Android的时候,看到类似下面的一个Button: 当时感觉这样的button有点像Material Design风格,真的以为是裁剪好的图片,好奇心驱使我上网查找实现的方法,原来不是裁剪好的图片,只是用xml来定义我们想要的图片,现在想想真的是挺搞笑,哈哈。实现这种图片我们可以自定义view,当然啦,最简单的还是用xml文件来定义! 现在看来,实现上面的效果,真的是太...
分类:其他好文   时间:2016-04-15 12:18:42    阅读次数:179
CAS单点登录学习笔记
CAS 单点登录 HTTP Status 500 - javax.net.ssl.SSLHandshakeException:sun.security.validator.ValidatorException: PKIX path building failed:sun.security.provider.certpath.SunCertPathBuilderException: unable to findvalid certification path to requested target...
分类:其他好文   时间:2016-04-15 12:17:53    阅读次数:218
Leetcode(59)-Count Primes
题目:Description:Count the number of prime numbers less than a non-negative number, n.思路: 题意:求小于给定非负数n的质数个数 西元前250年,希腊数学家厄拉多塞(Eeatosthese)想到了一个非常美妙的质数筛法,减少了逐一检查每个数的的步骤,可以比较简单的从一大堆数字之中,筛选出质数来,这方法被称作厄拉多塞筛法...
分类:其他好文   时间:2016-04-15 12:18:17    阅读次数:121
CentOS 6.5环境下heartbeat高可用集群的实现及工作原理详解
Linux HA Cluster高可用服务器集群,所谓的高可用不是主机的高可用,而是服务的高可用。    什么叫高可用:一个服务器down掉的可能性多种多样,任何一个可能坏了都有可能带来风险,而服务器离线通常带来的代价是很大的,尤其是web站点,所以当某一台提供服务的的服务器down掉不至于服务终止的就叫高可用。   什么叫心跳:就是将多台服务器用网络连接起来,而后每一台服务器...
分类:其他好文   时间:2016-04-15 12:19:18    阅读次数:234
神经网络学习笔记
神经网络sigmoid函数sigmoid函数是一种常见的挤压函数,其将较大范围的输入挤压到(0,1)(0,1)区间内,其函数的表达式与形状如下图所示:该函数常被用于分类模型,因为其具有很好的一个特性f′(x)=f(x)(1?f(x))f'(x) = f(x)(1-f(x))。这个函数也会被用于下面的神经网络模型中做激活函数。M-P神经元模型生物的神经网络系统中,最简单最基本的结构是神经元。每个神经元...
分类:其他好文   时间:2016-04-15 12:17:00    阅读次数:279
【BLE】CC2541之PWM控制直流电机
本文介绍如何在SimpleBLEPeripheral工程中,使用PWM控制直流电机...
分类:其他好文   时间:2016-04-15 12:17:06    阅读次数:747
更简单更全的material design状态栏
从实际使用需要出发,以最简单的方式实现了几种类型的MD状态栏。(重点在fitsSystemWindows的使用) 0,使用前提 targetSdkVersion 23; support librariy 23.3.0 styles-v19: true styles-v21+: true  @android:color/transparent 1,最普通的类型:只有一个ToolB...
分类:其他好文   时间:2016-04-15 12:18:46    阅读次数:256
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!