码迷,mamicode.com
首页 > 2019年01月27日 > 全部分享
Python爬虫从入门到放弃(十二)之 Scrapy框架的架构和原理
原文地址https://www.cnblogs.com/zhaof/p/7173397.html 这一篇文章主要是为了对scrapy框架的工作流程以及各个组件功能的介绍 Scrapy目前已经可以很好的在python3上运行Scrapy使用了Twisted作为框架,Twisted有些特殊的地方是它是事 ...
分类:编程语言   时间:2019-01-27 01:07:15    阅读次数:180
易组件——核心组件
组合框1_编辑内容被改变:事件发生时,组合框就处于可编辑下拉或列表模式。 列表框:选择命令:在所有项目中寻找首部包含指定文本的项目 图片框:动画为真:gif动画自动播放 编辑框:调节器(手动、自动)、输入方式、单行多行(自动换行) 选择列表框:多个单选或多选时可用此组件,重点方法:允许、选择、是否允 ...
分类:其他好文   时间:2019-01-27 01:07:04    阅读次数:205
机器学习入门-文本特征-使用LDA主题模型构造标签 1.LatentDirichletAllocation(LDA用于构建主题模型) 2.LDA.components(输出各个词向量的权重值)
函数说明 1.LDA(n_topics, max_iters, random_state) 用于构建LDA主题模型,将文本分成不同的主题 参数说明:n_topics 表示分为多少个主题, max_iters表示最大的迭代次数, random_state 表示随机种子 2. LDA.component ...
分类:其他好文   时间:2019-01-27 01:06:51    阅读次数:760
Python爬虫从入门到放弃(十七)之 Scrapy框架中Download Middleware用法
原文地址https://www.cnblogs.com/zhaof/p/7198407.html 这篇文章中写了常用的下载中间件的用法和例子。Downloader Middleware处理的过程主要在调度器发送requests请求的时候以及网页将response结果返回给spiders的时候,所以从 ...
分类:编程语言   时间:2019-01-27 01:06:39    阅读次数:235
什么叫做API?看完你就理解了
阅读编程资料时经常会看到API这个名词,网上各种高大上的解释估计放倒了一批初学者。初学者看到下面这一段话可能就有点头痛了。 API(Application Programming Interface,应用程序编程接口)是一些预先定义的函数,目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程 ...
分类:Windows程序   时间:2019-01-27 01:06:19    阅读次数:169
ESP8266 wifi干扰、钓鱼实现
说明:绝大部分都是对着下面的参考文章来做的。这里只把基本流程和我自己遇到的问题写一下。如有其他问题可以访问文章末的参考文章进行查找! esp8266模块 我们需要购买一块esp8266模块,如下图所示的这种。有底板,有Micro口。我这块是在某宝上购买的,15不到还包邮,贼划算(本着买来玩玩看的心态 ...
分类:其他好文   时间:2019-01-27 01:06:07    阅读次数:320
可持久化线段树/主席树(静态)
参考博客 先介绍一下主席树,主席树也称函数式线段树也称可持久化线段树。(其实就是支持查询历史版本,这个在看完之后就会了解) 其实主席树就是很多线段树组合的总体,从它的其它称呼也可以看出来了,其实它本质上还是线段树。 主席树就是利用函数式编程的思想来使线段树支持询问历史版本、同时充分利用它们之间的共同 ...
分类:其他好文   时间:2019-01-27 01:05:55    阅读次数:214
爱前端php开发五阶段重入门到精通
课程目录:第一阶段 - 前端基本功 一.HTML视频教程3天 二.CSS视频教程4天 三.javascript+jquery视频 四.Bootstrap-2天 第二阶段 - PHP入门 一. PHP基础视频 二. MySql基础 三. PHP核心编程视频教程 四. BBS论坛系统项目实践 第三阶段 ...
分类:Web程序   时间:2019-01-27 01:05:45    阅读次数:241
程序里面的‘脑筋急转弯’
数学中有一种特别常见的取巧算法,首尾相加,快速算和,高斯算法的背后小故事我都还记得清楚,真是让人羡慕的聪明脑子啊!所以我这种凡人只能通过苦思冥想才能发现程序与数学中的小陷阱和小技巧,记录下来做成标记,钉在我这平凡的人生号码牌上吧。 1. 使用while语句计算1到100的和。 首先给出我这平凡大脑错 ...
分类:其他好文   时间:2019-01-27 00:26:56    阅读次数:196
Python爬虫从入门到放弃(十)之 关于深度优先和广度优先
原文地址https://www.cnblogs.com/zhaof/p/7092400.html 网站的树结构 深度优先算法和实现 广度优先算法和实现 网站的树结构 通过伯乐在线网站为例子: 并且我们通过访问伯乐在线也是可以发现,我们从任何一个子页面其实都是可以返回到首页,所以当我们爬取页面的数据的 ...
分类:编程语言   时间:2019-01-27 00:26:46    阅读次数:310
浅谈Linux文件系统
Linux 与其他类 UNIX 系统一样并不区分文件与目录:目录是记录了其他文件名的文件。使用命令 mkdir 创建目录时,若期望创建的目录的名称与现有的文件名(或目录名)重复,则会创建失败。 Linux 上将文件分成两个部分:用户数据 (user data) 与元数据 (metadata)。 用户 ...
分类:系统相关   时间:2019-01-27 00:26:19    阅读次数:228
巴伦的原理及应用
巴伦(英语为balun)为一种三端口器件,或者说是一种通过将匹配输入转换为差分输出而实现平衡传输线电路与不平衡传输线电路之间的连接的宽带射频传输线变压器。巴伦的功能在于使系统具有不同阻抗或与差分/单端信令兼容,并且用于手机和数据传输网络等现代通信系统。 差分电路具有高增益、抗电磁干扰、抗电源噪声、抗 ...
分类:其他好文   时间:2019-01-27 00:26:09    阅读次数:1569
Initialize the shader
[TOC] Loads the shader files and makes it usable to DirectX and the GPU Now we will start with one of the more important functions to this tutorial wh ...
分类:其他好文   时间:2019-01-27 00:25:55    阅读次数:193
iOS学小程序从0到发布(适合iOS开发看)
Emmmm,最近一波失业潮。富某康、某团、摩某、京某、知某、某浪、58 某大面积裁员,那么在这个千钧一发之际,单纯iOS开发也着实不好过,回过头看一下,裁掉的都是单一选手,为了节约成本公司留下的都是身兼多职的全栈开发工程师。 那么iOS, 有些选手就要找对方向再学一手以备下次被裁员的不是自己。HTM ...
分类:微信   时间:2019-01-27 00:25:47    阅读次数:393
python爬虫从入门到放弃(九)之 实例爬取上海高级人民法院网开庭公告数据
原文地址https://www.cnblogs.com/zhaof/p/6959012.html 通过前面的文章已经学习了基本的爬虫知识,通过这个例子进行一下练习,毕竟前面文章的知识点只是一个 一个单独的散知识点,需要通过实际的例子进行融合 分析网站 其实爬虫最重要的是前面的分析网站,只有对要爬取的 ...
分类:编程语言   时间:2019-01-27 00:25:39    阅读次数:227
python 学习第四天
2.5列表list。 列表是python中的基础数据类型之一,其他语言中也有类似于列表的数据类型,比如js中叫数组,他是以[]括起来,每个元素以逗号隔开,而且他里面可以存放各种数据类型比如: li = [‘alex’,123,Ture,(1,2,3,’wusir’),[1,2,3,’小明’,],{‘ ...
分类:编程语言   时间:2019-01-27 00:25:31    阅读次数:200
flowable 图片缓存
背景 由于我们的每次显示图片的话,都将需要大量的查询和相关的流。这样对我们的系统压力极大,用户体验极差。 所以使用了缓存把图片流缓存起来,这样就可以解决问题了。 实现 这里我用的是ehcache,由于他小巧依赖少。 1:把我们的包导入进来 2:配置xml文件 3:配置application.prop ...
分类:其他好文   时间:2019-01-27 00:25:22    阅读次数:191
995条   上一页 1 ... 54 55 56 57 58 59 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!