pyspark有个bug, 虽然下面代码写了 write.mode("overwrite")但是不生效 spark.conf.set("hive.exec.dynamic.partition.mode", "constrict") db_df.repartition(1).write.mode("o ...
分类：
其他好文 时间：
2021-02-23 14:14:20
阅读次数：
0
postgresql数据库 timescaledb 时序库 把大数据量表转换为超表 文章目录 postgresql数据库 timescaledb 时序库 把大数据量表转换为超表一 创建新表二 把新表改为超表三 插入数据1.数据量不大的情况可以直接插入2.如果数据量比较大 可以采取 一天一天 插入 或 ...
分类：
数据库 时间：
2021-02-06 11:48:38
阅读次数：
0
postgresql数据库 timescaledb 时序库 把大数据量表转换为超表 文章目录 postgresql数据库 timescaledb 时序库 把大数据量表转换为超表一 创建新表二 把新表改为超表三 插入数据1.数据量不大的情况可以直接插入2.如果数据量比较大 可以采取 一天一天 插入 或 ...
分类：
数据库 时间：
2021-02-06 11:48:18
阅读次数：
0
一般的批量插的 sql语句数据违反唯一性约束时，出现重复数据将会直接报错并停止执行 insert into tb_name (field1,field2) values(f11,f12),(f21,f22)... 这种语句将会报错并停止执行 Warning: (1062, "Duplicate en ...
分类：
数据库 时间：
2021-02-04 12:25:31
阅读次数：
0
在Library/Think/Model.class.php 这个基础model类中在添加add,修改save,和删除delete 时各自回调用两个回调函数. 使用这两个回调函数会给开发带来方便. 1 . add()方法回调函数 // 插入数据前的回调方法 protected function _b ...
分类：
Web程序 时间：
2021-01-29 11:44:19
阅读次数：
0
可以设置mysql的id字段自动递增，方法如下：在 MySQL 8.0 Command Line Client 中操作 use 数据库名称 ALTER TABLE 数据库中的表名称 MODIFY id int NOT NULL AUTO_INCREMENT; 问题得以解决 ...
分类：
数据库 时间：
2021-01-27 13:57:27
阅读次数：
0
优化批量插入数据： 数据源，根据主键做好排序，再进行数据导入： mysql> load data local infile '/root/sql1.log' intotable `table_1` fields terminated by ',' lines terminated by '\n'; ...
分类：
数据库 时间：
2021-01-20 11:53:32
阅读次数：
0
INSERT IGNORE 与INSERT INTO的区别就是INSERT IGNORE会忽略数据库中已经存在 的数据，如果数据库没有数据，就插入新的数据，如果有数据的话就跳过这条数据。这样就可以保留数据库中已经存在数据，达到在间隙中插入数据的目的。 eg: insert ignore into t ...
分类：
其他好文 时间：
2021-01-19 11:46:25
阅读次数：
0
记一个数据库方面的面试题：数据库自增ID用完了会怎么样？ MySQL中 int 类型是4个字节，如果是有符号，那就是 [ -2^31 , 2^31-1 ]， 如果是无符号，那就是 [ -2^31 , 2^32-1 ]，那就是 4294967295 如果该表是需要频繁插入数据，那么是可能达到这么多数据 ...
分类：
数据库 时间：
2021-01-08 11:33:26
阅读次数：
0
select 查询数据（大部分） 在网站应用中进行数据显示查询操作 insert 插入数据 在网站应用中进行用户注册添加等操作 delete 删除数据 后台管理里面删除文章删除用户等操作 update 更新数据 数据同步缓存等操作 通过以上查询方式与网站应用的关系，可以由注入点产生地方或应用猜测到对 ...
分类：
数据库 时间：
2021-01-07 11:53:11
阅读次数：
0
