一、目标网页及要求 目标网页： https://www.xuexi.cn/f997e76a890b0e5a053c57b19f468436/018d244441062d8916dd472a4c6a0a0b.html 要求： 爬取页面中的详情页文章标题、内容、发布时间、文章来源，存入本地mongodb ...
分类：
Web程序 时间：
2021-06-02 15:57:17
阅读次数：
0
PostgreSQL 大版本升级主要有3种方式: 1、 pg_dumpall/pg_restore： pg_dumpall 通过逻辑导出旧版本数据库结构、数据在新版本数据库上使用pg_restore 恢复，通过指定 -j 参数可以并行的导出、恢复加快升级速度，适用于数据量不大有充足的停机时间的场景。 ...
分类：
数据库 时间：
2021-06-02 11:00:37
阅读次数：
0
往常使用options.Find().SetSort(bson.D{{"a", -1},{"b", -1}})结果报错，感觉使用方法没问题，排查之后发现是import的包错了导致。 cannot transform type bson.D to a BSON Document: WriteArray ...
分类：
数据库 时间：
2021-05-25 18:10:59
阅读次数：
0
一、介绍 1、基本介绍 MongoDB部署架构分为单机、复制集群、分片集群。单机适合学习用，分片集群比较复杂且运维难度高。 分片集群是把大型数据集进行拆分，分片到多个MongoDB节点上，这些节点组成了分片集群。分片结构如下： 2、词汇表 Shard：分片，存储集群中的一部分数据。可以是单个mong ...
分类：
数据库 时间：
2021-05-25 17:49:26
阅读次数：
0
聚合管道操作 聚合管道操作主要包含下面几个部分： 命令 功能描述 $project 指定输出文档里的字段. $match 选择要处理的文档，与fine()类似。 $limit 限制传递给下一步的文档数量。 $skip 跳过一定数量的文档。 $unwind 扩展数组，为每个数组入口生成一个输出文档。 ...
分类：
数据库 时间：
2021-05-24 16:40:49
阅读次数：
0
在使用MongoDB存储数据的时候，我们查询的时候，有时候难免会需要进行连表查询。但是MongoDB本身是非关系性数据库，连表查询，很多时候，需要我们自己在代码里手工操作。但是从 MongoDB 3.2 版本过后，我们可以使用 $lookup 进行连表查询。下面就简单介绍一下 MongoDB 的 $ ...
分类：
数据库 时间：
2021-05-24 15:55:53
阅读次数：
0
1、下载mongo wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel70-4.2.1.tgz 2、解压 tar -zxvf mongodb-linux-x86_64-rhel70-4.2.1.tgz 3、移动。将解压完的m ...
分类：
数据库 时间：
2021-05-24 14:35:54
阅读次数：
0
使用组件 MongoDB.Driver 插入数据 class Program { static void Main(string[] args) { AddWorkerToMongo(); } static void AddWorkerToMongo() { var client = new Mon ...
分类：
数据库 时间：
2021-05-24 09:44:03
阅读次数：
0
环境：WIN10 Docker Desktop 部署命令：/E windows盘符E docker run -p 6003:6379 --name redis_v3 -v /E/Docker/redis_3/conf/redis.conf:/usr/local/etc/redis/redis.con ...
分类：
其他好文 时间：
2021-05-24 09:23:39
阅读次数：
0
扫描以下常见未授权访问 redis、mongodb、memcached、elasticsearch、zookeeper、ftp、CouchDB、docker、Hadoop 安装 pip3 install -r requirements.txt -i https://mirrors.aliyun.co ...
分类：
其他好文 时间：
2021-05-24 08:32:18
阅读次数：
0
