Jenkins Pipeline 有两种写法： Declare 以及 Script，前一种使用了大量Jenkins基于Groovy实现的DSL，使用起来相对有限制；后一种可以很好的在Jenkinsfile 中是用Groovy语句。 下面记录Script模式下常见的一些注意点： 1. 如何退出当前的b ...
分类：
其他好文 时间：
2020-10-30 11:35:00
阅读次数：
23
.drone.yml 1 kind: pipeline 2 name: default 3 steps: 4 - name: test 5 image: python:3.7-alpine 6 commands: 7 - "python test.py" 8 9 # - name: publish ...
分类：
其他好文 时间：
2020-10-27 11:36:36
阅读次数：
16
scrapy是基于twisted的异步处理框架，与传统的requests爬虫程序执行流程不同，scrapy使用多线程，将发送请求，提取数据，保存数据等操作分别交给Scheduler（调度器），Downloader（下载器），Spider（爬虫），Pipeline（管道）等爬虫“组件”来完成。多线程的 ...
分类：
其他好文 时间：
2020-10-24 10:26:51
阅读次数：
25
pipeline{agent{label‘Linux‘}parameters{gitParameterbranch:‘‘,branchFilter:‘.*‘,defaultValue:‘origin/master‘,description:‘代码分支‘,name:‘project‘,quickFilterEnabled:false,selectedValue:‘NONE‘,sortMode:‘NO
分类：
移动开发 时间：
2020-10-18 09:32:24
阅读次数：
36
云上不仅能提供机器学习所需的资源，还有各种环境以及配套工具，能让做机器学习的人只用专注于机器学习本身。
分类：
其他好文 时间：
2020-10-18 09:23:54
阅读次数：
19
其实这次的内容我是想放在上一篇的博文中的，但是上次犯懒了，就放在这里了奥。 基于mysql持久化操作： 将爬取数据写入文件这种情况还是少见的，因为文件无论是内存占用还是读写速度都存在一定的瑕疵，所以我们更多的是操作数据库。因为items对象已经准备好了所以我们只需要进行pipeline管道更改就可以 ...
分类：
编程语言 时间：
2020-10-10 17:35:46
阅读次数：
25
使用pipeline原因本质上，jenkins是一个自动化引擎，它支持许多自动模式。流水线向Jenkins添加了一组强大的工具，支持用例、简单的持续集成到全面的持续交付流水线。通过对一系列的发布任务建立标准的模板，用户可以利用更多流水线的特性比如：代码化:流水线是在代码中实现的，通常会存放到源代码控制，使团队具有编辑、审查和更新他们项目的交付流水线的能力。耐用性：流水线可以从Jenkins的mas
分类：
其他好文 时间：
2020-09-15 21:30:38
阅读次数：
58
基础依赖gitlb创建group,教程见我的另一篇博客： https://www.cnblogs.com/SunshineKimi/p/10798836.html 2.jinkins服务部署linux，这里以centsos为例： 2.1下载jenkins: sudo wget -O /etc/yum ...
分类：
其他好文 时间：
2020-09-15 21:04:46
阅读次数：
37
Aggregation 聚合操作处理数据记录并返回计算结果 聚合操作将来自多个文档的值进行分组，对分组的数据进行各种操作并返回单个结果 mongodb 提供了三种进行聚合操作的方法：聚合管道、map-reduce函数、single purpose 聚合 Aggregation Pipeline mo ...
分类：
数据库 时间：
2020-09-09 19:22:32
阅读次数：
69
1、准备pvc也就是k8s容器的持久化存储 创建pv、pvc apiVersion: v1 kind: PersistentVolume metadata: name: pv-mysql-data namespace: db spec: capacity: storage: 5Gi accessMo ...
分类：
数据库 时间：
2020-08-28 14:34:48
阅读次数：
69
