Scrapy框架介绍 Scrapy是一个非常优秀的爬虫框架,基于python。 只需要在cmd运行pip install scrapy就可以自动安装。用scrapy h检验是否成功安装 Scrapy部署一个简单的爬虫库,是一个爬虫框架。此外和requests库相比,Scrapy库适合大型爬虫,适合网 ...
分类:
其他好文 时间:
2020-04-22 19:40:34
阅读次数:
55
之前编写jenkins pipeline时,参考 如下博客的方法: https://www.chenshaowen.com/blog/jenkins-pipeline-usging-and-debug.html 2.2 远程调用 Jenkins 执行 Pipeline 如果需要在 Atom 中利用远 ...
分类:
其他好文 时间:
2020-04-17 15:54:39
阅读次数:
113
1、编写playbook还是接着上一节的内容,在windows本地的repo目录中已经有了ansible-playbook-repo项目;在ansible-playbook-repo中,再复制一份playbook出来:然后修改wordpress_playbooks中的内容:cd wordpress_... ...
分类:
其他好文 时间:
2020-04-16 22:33:14
阅读次数:
97
1. Author 付汉杰 hankf@xilinx.com 2020-04-13 2. 概述 Xilinx提供了完整的V4L2的驱动程序,Xilinx V4L2 driver。处于最顶层的驱动程序是V4L2框架的视频管道(Video pipeline)驱动程序,也叫桥驱动程序(bridge dri ...
分类:
系统相关 时间:
2020-04-16 13:32:23
阅读次数:
93
jenkins(二) Pipeline语法速成 标签: "运维" "jenkins" "持续集成" [toc] 背景描述: 为了交付文档,先写个速成的版本,目的是供其他同事基于此模板快速配置使用,后续要继续深入研究。 查资料的时候看到了这个文章: "Jenkins pipeline脚本编写实践分享( ...
分类:
其他好文 时间:
2020-04-15 15:16:03
阅读次数:
104
pipeline { agent any parameters { choice( choices: 'feature\nmaster\npercent10', description: '选择要发布的分支,默认是feature', name: 'deploy_branch' ) choice( c ...
分类:
其他好文 时间:
2020-04-12 18:50:14
阅读次数:
147
最近公司在做移动端的项目,自然而然的需要搭建打包的环境。本来计划用Jenkins的,但是发现在gitlab上创建完项目后,提示去配置pipeline,于是决定用gitlab去尝试下,毕竟我觉得Jenkins的配置过于复杂了。 gitlab runner 在gitlab中,gitlab runner相 ...
分类:
移动开发 时间:
2020-04-11 09:21:07
阅读次数:
77
处理业务:事件是如何在 pipeline 中传播的 [toc] __Netty 系列目录()__ 在上一节 "接收数据:自适应缓冲区和连接读是为了解决什么问题" 中,我们知道 NioEventLoop 不断的轮询,接收 OP_READ 事件;然后将读取到的数据通过 pipeline.fireChan ...
分类:
其他好文 时间:
2020-04-06 12:03:05
阅读次数:
122
由于Universal Render Pipeline目前(2020年4月1日)把阴影淡入淡出这个功能竟然给取消了…我自己拿片元位置到相机位置的距离进行了一个淡化,但是阴影边缘老是被裁切…后来研究了一下Unity里面这个CBuffer是干嘛的。有一些结论,鉴于似乎没搜到,就发个博客吧。。。 至于这些 ...
分类:
编程语言 时间:
2020-04-05 13:38:11
阅读次数:
96
学习目标 sklearn中的Pipeline 偏差与方差 模型正则化之L1正则、L2正则 一、sklearn中的Pipeline 研究一个因变量与一个或多个自变量间多项式的回归分析方法,称为多项式回归(Polynomial Regression)。多项式回归是线性回归模型的一种,其回归函数关于回归系 ...
分类:
其他好文 时间:
2020-04-05 13:35:04
阅读次数:
79