批量在XML查询 collection: 指定要遍历的集合(三种情况 list,array,map) !!!!在这种使用注解sql的情况下,这里请填写mapper方法中集合的名称 item:将当前遍历出的元素赋值给指定的变量 (相当于for循环中的i)separator:每个元素之间的分隔符 ope ...
分类:
其他好文 时间:
2020-04-24 01:21:46
阅读次数:
61
存储工具:阿里云->对象存储需要将数据从云端下载到本地后再进行后续分析处理。手动下载需要下载的文件不多时,可以用这个方式。依次点击:阿里云->控制台->对象存储->Bucket列表->XX Bucket->文件管理该界面下,选中数据文件后,点击 批量操作->下载脚本下载(Python)按照阿里云的S... ...
分类:
编程语言 时间:
2020-04-14 17:00:28
阅读次数:
141
Redis 事务可以一次执行多个命令, 并且带有以下三个重要的保证: 批量操作在发送 EXEC 命令前被放入队列缓存。 收到 EXEC 命令后进入事务执行,事务中任意命令执行失败,其余的命令依然被执行。 在事务执行过程,其他客户端提交的命令请求不会插入到事务执行命令序列中。 一个事务从开始到执行会经 ...
分类:
其他好文 时间:
2020-04-13 14:04:46
阅读次数:
75
项目用的ORM框架是用springdatajpa来做的,有些批量数据操作的话,用这个效率太低,所以用mybatis自己写sql优化一下。 一般情况,我们肯定是先查询,有就修改,没有就添加,这样的话,单个操作还好,如果是大量数据的话,每次都需要先查后改(如果用springdatajpa的话,添加之前还 ...
分类:
其他好文 时间:
2020-04-11 20:33:38
阅读次数:
442
一、基础环境[root@BJ-SaltStack-Node1~]#cat/etc/redhat-releaseCentOSLinuxrelease7.7.1908(Core)[root@BJ-SaltStack-Node1~]#python--versionPython2.7.5二、SaltSatck安装完全按照官方文档来即可。https://repo.saltstack.com/2018.3.h
开发中经常出现批量的插入或者更新操作,当批量操作的数据较多时,比如到了几万行数据,会遇到操作数据库报错的情况,这个其中一种原因就是max_allowed_packet的配置问题,max_allowed_packet配置了数据库单次执行sql语句的大小,若超出配置的大小,就会出现报错。 如何查看max ...
分类:
数据库 时间:
2020-04-07 00:30:32
阅读次数:
84
消息队列 - Spring Boot 对rabbitmq批量处理数据的支持 一丶前言 在生产中,存在一些场景,需要对数据进行批量操作。如,可以先将数据存放到redis,然后将数据进行批量写进数据库。但是使用redis,不得不面对一个数据容易丢失的问题。也可以考虑使用消息队列进行替换,在数据持久化,数 ...
分类:
编程语言 时间:
2020-04-04 22:41:54
阅读次数:
409
一、安装第三方包 pip install openpyxl==2.5.4 (注意版本号) 二、代码实现 1)创建一个excel文件,并写入内容 from openpyxl import Workbook import datetime import time import locale wb = W ...
分类:
其他好文 时间:
2020-03-30 00:17:13
阅读次数:
100
sql 批量操作添加/ 删除 表主键 直接上代码把: 是存储过程哦 , GOSET ANSI_NULLS ONGOSET QUOTED_IDENTIFIER ONGOALTER proc [dbo].[prc_name] (@nameinfo nvarchar(50) output)AS decla ...
分类:
数据库 时间:
2020-03-27 18:25:12
阅读次数:
113
带参数语句通常用于批量操作,例如批量插入。 截取一小段代码,修改后做一个简单的示例: 1. 表结构: CREATE TABLE `数据` ( `createtime` datetime NOT NULL, `dt` datetime NOT NULL, `val` float(7,2) DEFAUL ...
分类:
数据库 时间:
2020-03-25 16:23:16
阅读次数:
162