create temporary table temp_t like t1; alter table temp_t add index(b); insert into temp_t select * from t2 where b>=1 and b<=2000; select * from t1 j ...
分类：
其他好文 时间：
2021-06-10 18:34:39
阅读次数：
0
为什么需要数据采集首先数据采集是在跨库查询能力之上的补充功能，在SmartbiV9的数据源管理中，用户可以通过上传文件（Excel、CSV、TXT）将本地原始数据补充到数据平台中，和其它企业内部数据（关系型数据）一起用于后续的语义层封装和关联查询。但是在很多时候，分析人员甚至最终报表使用者会发现数据质量的问题，比如某产品的型号大小写不对造成无法合并统计、某客户的归属城市错误造成业绩计算错误....
分类：
编程语言 时间：
2020-09-07 19:14:08
阅读次数：
45
由于postgresql 数据库中，跨库查询不能像SQL server一样直接dbname.table 调用将多个库的不同表join一起查询。 因此想到了SQL server中的link server的方式，在postgresql数据库中可以使用dblin的方式实现。 1. 安装dblink 一般数 ...
分类：
数据库 时间：
2020-09-03 16:47:05
阅读次数：
63
为什么需要跨库整合能力Smartbi支持多种数据源轻松接入，基本涵盖了市面上所有主流的数据库。无可否认多元的数据连接能力使Smartbi能快速连接现有数据源，构建统一的数据分析平台。但在项目实施过程中，往往会遇到以下的问题：我们企业数据存储在不同甚至不同类型的数据库里面，当用户查询数据的范围比较广，并不限于一个数据库时，需要跨多个数据库进行关联查询分析，如果按照传统的方式：先抽取到要通过ETL把数
分类：
其他好文 时间：
2020-08-03 23:27:20
阅读次数：
110
最近有efcore跨库查询的需求，研究了下colder框架里文档的分库实现，发现并不能完全实现一个接口下的跨库查询请求，只能满足一个业务层构造指定的唯一一个数据库访问接口。 先说下文档是怎么实现的 DbAccessor实现使用多数据库 默认框架会自动注入IDbAccessor作为数据库访问接口,在需 ...
分类：
数据库 时间：
2020-07-06 22:46:23
阅读次数：
109
本文目录 一、数据库瓶颈 IO瓶颈 CPU瓶颈 二、分库分表 水平分库 水平分表 垂直分库 垂直分表 三、分库分表工具 四、分库分表步骤 五、分库分表问题 非partition key的查询问题 非partition key跨库跨表分页查询问题 扩容问题 六、分库分表总结 七、分库分表示例 一、数据 ...
分类：
其他好文 时间：
2020-07-04 15:26:09
阅读次数：
58
前一阵领导安排了一个任务:定时将集团数据库某表的数据同步至我们公司服务器的数据库,感觉比写增删改查SQL有趣,特意记录下来,希望能帮到有类似需求的小伙伴,如有错误也希望各位不吝指教 环境描述: 集团数据库:Oracle 11g 部门数据库:Oracle 11g 使用的软件:PLSQL Develop ...
分类：
数据库 时间：
2020-07-01 09:18:56
阅读次数：
71
1. 转自https://www.jianshu.com/p/5e0062f6cf62 1. MyCAT基础架构图 image.png 2. MyCAT基础架构准备 2.1 环境准备： 两台虚拟机 db01 db02 每台创建四个mysql实例：3307 3308 3309 3310 2.2 删除历 ...
分类：
数据库 时间：
2020-06-14 23:49:18
阅读次数：
78
1 设置key set key values mset key value key2 value2 2 查看key get key mget key1 key2 3 设置过期时间 expire key timestamp 4 查看key的过期时间 ttl key 5 查看key的列表 keys * ...
分类：
其他好文 时间：
2020-06-14 20:45:15
阅读次数：
63
前言： 之前一直习惯用mybatisPlus，表结构也都比较简单，mybatisPlus对单表的CRUD 比较友好，今年新换了一家公司，业务场景相对复杂，需要跨表跨库查询数据，故，毕业两年，刚开始接触手写sql，话不多说，先介绍今天的主题：很多时候，在查询数据库的时候。经常会出现以下的情况： 我们需 ...
分类：
其他好文 时间：
2020-06-10 17:26:04
阅读次数：
187
