我们一直使用 print 方法打印爬虫获取的数据,接下来你将把这些数据保存到特定格式文件中。 CSV 格式 Python 提供了标准库 csv 来读写 csv 数据。 新建一个 Python 文件,输入以下代码,并运行。 import csv file = open('movies.csv', 'w ...
分类:
编程语言 时间:
2020-07-14 16:31:21
阅读次数:
82
1. order by,sort by,distribute by,cluster by的区别? 2. 聚合函数是否可以写在order by后面,为什么? 需求催生技术进步 一、课前准备 二、课堂主题 三、课堂目标 1. 掌握hive表的数据压缩和文件存储格式 2. 掌握hive的JDBC代码操作 ...
分类:
其他好文 时间:
2020-06-26 18:42:15
阅读次数:
58
虚拟机类加载机制概述 “代码编译的结果从本地机器码转变为字节码,是存储格式发展的一小步,却是编程语言发展的一大步。” 什么是虚拟机的类加载机制? Class文件中存储的各种关于类的描述信息,需要加载到虚拟机中才能运行和使用。 这里所说的“Class文件”指的是一串二进制的字节流,并不仅仅指.clas ...
分类:
其他好文 时间:
2020-06-19 21:04:05
阅读次数:
45
一、插入文档 文档的数据结构和 JSON 基本一样。所有存储在集合中的数据都是 BSON 格式。BSON 是一种类似 JSON 的二进制形式的存储格式,是 Binary JSON的简称。 MongoDB使用insert()或save()方法向集合中插入文档,语法如下: db.COLLECTION_N ...
分类:
数据库 时间:
2020-06-13 10:53:00
阅读次数:
73
一、JSON 维基百科 JSON 数据格式与语言无关 JSON 的官方 MIME 类型是 application/json,文件扩展名是 .json 二、应用领域 NoSQL数据库 相对于传统的关系型数据库,一些基于文档存储的NoSQL非关系型数据库选择JSON作为其数据存储格式,比较出名的产品有: ...
分类:
Web程序 时间:
2020-05-31 13:00:07
阅读次数:
86
1.INI文件操作: .ini 文件是Initialization File的缩写,即初始化文件,是windows的系统配置文件所采用的存储格式,统管windows的各项配置,一般用户就用windows提供的各项图形化管理界面就可实现相同的配置了。但在某些情况,还是要直接编辑ini才方便。通过INI ...
分类:
编程语言 时间:
2020-05-28 19:54:48
阅读次数:
69
一.数字图像的储存 数字图像存储时,我们存储的是图像中像素点的数值,对应的是一个数字矩阵。 2.Mat的储存 1.OPENCV1基于C接口定义的图像存储格式Ipllmage*,直接暴露内存,如果忘记释放内存,就会造成 内存泄漏。 二.从OPENCV2开始,使用Mat类储存图像,具有以下优势: (1) ...
分类:
其他好文 时间:
2020-05-21 19:00:10
阅读次数:
56
回顾: C语言中的数据(基本) 根据读写属性 常量/变量 变量的类型 确定该变量的字节数,取值范围,数据的存储格式 数据类型,是指在数据结构定义上的数据的集合以及基于该集合的运算 C语言中的运算(基本) 运算符 sizeof 计算变量/类型/常量/表达式 字节数 sizeof(int); sizeo ...
分类:
编程语言 时间:
2020-05-15 17:46:12
阅读次数:
79
1.需求 业务中需要实现在两个集合中搜索数据,并返回交集。 用SQL的伪代码可以描述如下: 2.现有存储格式 业务使用了redis的有序集合(sorted set)来存储数据: 常规的思路是: 3.lua实现 看了一下redis的lua脚本功能,可以完全在redis服务器端完成: lua like ...
分类:
数据库 时间:
2020-05-09 18:47:01
阅读次数:
73
1.MyISAM 特点:不支持事务、外键。支持3种不同的存储格式:静态表,动态表,压缩表 优点:访问速度快,对事务完整性没有要求(select、insert) 2.InnoDB 特点:提供了具有提交、回滚和崩溃恢复能力的事务安全。支持自动增长列、外键 相比MyISAM,写的处理效率差,占用多的磁盘空 ...
分类:
数据库 时间:
2020-05-07 00:34:19
阅读次数:
80