###摘要： 我们经常需要将大量数据保存起来以备后续使用，数据库是一个很好的解决方案。在众多数据库中，MySQL数据库算是入门比较简单、语法比较简单，同时也比较实用的一个。 ###1. pymysql.connect()连接数据库函数 连接数据库是进行数据库操作的第一步 import pymysql ...
分类：
数据库 时间：
2020-07-23 16:42:35
阅读次数：
102
一、持久化简介 Redis 的数据全部存储在内存中，如果突然出现宕机，数据将全部丢失。为保证数据的安全性，需要将内存中的数据保存到硬盘中，这种保存数据的机制就叫做持久化。持久化使得在 Redis 服务器重启时，可以通过存储在硬盘中的数据恢复到 Redis 服务器关闭前的状态。 根据存储数据的形式，R ...
分类：
其他好文 时间：
2020-07-19 23:29:17
阅读次数：
76
Python爬虫 # 开发思路 准备 - 分析网页内容-结合chrome开发者模式 爬取原始数据 HTTP库 提取/清洗数据 保存 # 引入包 urllib - 指定url 获取网页信息 bs4 - 解析网页 re - 正则表达式，文字匹配 xlwt - excel操作 sqlite3 - SQLi ...
分类：
编程语言 时间：
2020-07-18 15:31:42
阅读次数：
66
5.1 文件存储 文件存储形式多种多样，比如可以保存成 TXT 纯文本形式，也可以保存为 JSON 格式、CSV 格式等，本节就来了解一下文本文件的存储方式。 5.1.1 TXT 文本存储 将数据保存到 TXT 文本的操作非常简单，而且 TXT 文本几乎兼容任何平台，但是这有个缺点，那就是不利于检索 ...
分类：
其他好文 时间：
2020-07-17 13:46:26
阅读次数：
53
我们一直使用 print 方法打印爬虫获取的数据，接下来你将把这些数据保存到特定格式文件中。 CSV 格式 Python 提供了标准库 csv 来读写 csv 数据。 新建一个 Python 文件，输入以下代码，并运行。 import csv file = open('movies.csv', 'w ...
分类：
编程语言 时间：
2020-07-14 16:31:21
阅读次数：
82
前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。 一个简单的Python资讯采集案例，列表页到详情页，到数据保存，保存为txt文档，网站网页结构算是比较规整，简单清晰明了，资讯新闻内容的采集和保存！ 应用到的库 reques ...
分类：
编程语言 时间：
2020-07-11 22:35:07
阅读次数：
73
Redis简介 Redis 是完全开源免费的，遵守BSD协议，是一个高性能的key-value数据库。 五种数据类型String，List，Hash，Set，Zset。 Redis 与其他 key - value 缓存产品有以下三个特点： Redis支持数据的持久化，可以将内存中的数据保存在磁盘中， ...
分类：
其他好文 时间：
2020-07-11 09:43:20
阅读次数：
47
在vue项目中用vuex来做全局的状态管理， 发现当刷新网页后，保存在vuex实例store里的数据会丢失。 原因： 因为store里的数据是保存在运行内存中的,当页面刷新时，页面会重新加载vue实例，store里面的数据就会被重新赋值初始化 解决思路： 将state的数据保存在localstora ...
分类：
其他好文 时间：
2020-07-08 13:48:49
阅读次数：
212
一、基本概念 大数据也称之为LOB(Large Objects)，LOB又分为：clob和blob，clob用于存储大文本，blob用于存储二进制数据，例如图像、声音、二进制文等。 在实际开发中，有时是需要用程序把大文本或二进制数据直接保存到数据库中进行储存的。 对MySQL而言只有blob，而没有 ...
分类：
其他好文 时间：
2020-07-03 23:11:05
阅读次数：
72
和Mysql主从复制的原因一样，Redis虽然读取写入的速度都特别快，但是也会产生读压力特别大的情况。为了分担读压力，Redis支持主从复制，Redis的主从结构可以采用一主多从或者级联结构，Redis主从复制可以根据是否是全量分为全量同步和增量同步。下图为级联结构。 全量同步Redis全量复制一般 ...
分类：
其他好文 时间：
2020-07-02 13:45:03
阅读次数：
60
