#编码流程: #1.验证码的识别,获取验证码图片的文字数据 #2.对post请求进行发送(处理请求函数) #3.对响应函数进行持久化存储 import requests from lxml import etree from CodeClass import YDMHttp #创建一个session ...
分类:
其他好文 时间:
2020-07-28 10:07:17
阅读次数:
75
import requests from lxml import etree import re from multiprocessing.dummy import Pool #需求:爬取梨视频的视频数据 headers = { 'User-Agent':'Mozilla/5.0 (Windows ...
分类:
编程语言 时间:
2020-07-28 10:02:06
阅读次数:
77
编程路漫之远兮,集数据库之大体 ; 劝君专注案前事,亦是杯酒敬苍生 ; 数据库基本概念 数据库: DataBase 简称 : DB,用于存储和管理数据的仓库。 特点: 1. 持久化存储数据的。其实数据库就是一个文件系统 2. 方便存储和管理数据 3. 使用了统一的方式操作数据库 -- SQL MyS ...
分类:
数据库 时间:
2020-07-27 09:26:49
阅读次数:
109
聚焦爬虫:爬取页面中指定的页面内容。编码流程:1.指定url2.发起请求3.获取响应数据4.数据解析5.持久化存储数据解析分类:1.bs42.正则3.xpath(***)数据解析原理概述:解析的局部的文本内容都会在标签之间或者标签对应的属性中进行存储1.进行指定标签的定位2.标签或者标签对应的属性中存储的数据值进行提取(解析)bs4进行数据解析数据解析的原理:1.标签定位2.提取标签、标签属性中存
分类:
编程语言 时间:
2020-07-22 20:21:41
阅读次数:
68
事先说明,由于本人是刚接触Revit,所有知识点,都是我自己一边研究一边写的。所以,可能是有错误的,若有错误,还望指正和海涵。而且本人还没有编写Revit二开的经验,所以与实际编程可能是有脱节的。 Element估计是元素,这些元素是可以被Revit持久化存储的最小单位。 Reference估计是参 ...
分类:
其他好文 时间:
2020-07-22 16:10:08
阅读次数:
115
ORM(O/R Mappping对象关系映射)的基础概念 在我们的系统中,存在大量的需要进行持久化存储的对象,这些对象可能是各种各样的业务单据,也可能是我们的系统配置信息等。另外一些属于内存中使用而不需要进行持久化存储的对象,不属于我们的讨论范围。而在支持对象序列化的语言比如C#,Java中,我们可 ...
分类:
编程语言 时间:
2020-07-18 00:44:02
阅读次数:
64
背景 目前 机器学习平台 后端采用k8s架构进行GPU和CPU资源的调度和容器编排。总所周知,k8s的后端核心存储使用etcd进行metadata持久化存储。机器学习平台采取[External etcd topology](http://way.xiaojukeji.com/article/Exte ...
分类:
其他好文 时间:
2020-07-15 23:14:34
阅读次数:
90
1. PersistentVolume(PV)简介 1.1 为什么需要Persistent Volume(PV) 1.2 PersistentVolume(PV)和Volume的区别 1.3 PV和PVC更具体的概念和关系 1.3.1 PersistentVolume(PV) 1.3.2 Persi ...
分类:
Web程序 时间:
2020-07-11 00:01:32
阅读次数:
57
Redis 持久化机制 什么是Redis持久化? 持久化就是把内存的数据写到磁盘中去,防止服务宕机了内存数据丢失; Redis提供了两种持久化方式:RDB(默认)和 AOF; 数据存放于: 内存:高效、断电(关机)内存数据会丢失 磁盘:读写速度慢于内存,断电数据不会丢失 Redis持久化存储支持两种 ...
分类:
其他好文 时间:
2020-07-08 22:55:58
阅读次数:
59
# 今日内容 1. 数据库的基本概念 2. MySQL数据库软件 1. 安装 2. 卸载 3. 配置 3. SQL ## 数据库的基本概念 1. 数据库的英文单词: DataBase 简称 : DB 2. 什么数据库? * 用于存储和管理数据的仓库。 3. 数据库的特点: 1. 持久化存储数据的。其 ...
分类:
数据库 时间:
2020-07-07 20:02:09
阅读次数:
88