码迷,mamicode.com
首页 > 其他好文 > 详细

第一章 简单爬取动态页面

时间:2020-08-08 00:35:51      阅读:70      评论:0      收藏:0      [点我收藏+]

标签:服务   head   搜狗   uri   enc   string   enter   over   时间   

使用AWS的dms同步工具,把mysql数据同步到postgres,工具本身是没办法同步索引这些信息,也还有一些额外的限制,重建索引就相当麻烦了,写了一个脚本:

mysql执行,查询mysql里面有哪些索引,生成postgres里面建索引的语法:

select table_name,concat(cc.ct_inx,concat((,group_concat(concat(",substring_index(substring_index(cc.colns,,,b.help_topic_id + 1),, ,- 1) ,")),)))AS add_inx
       from (select  CONCAT(create index idx_,concat(ma.table_name,_,FLOOR(1+ rand()*99)), on ) as ct_inx,colns,table_name
from
(SELECT a.TABLE_NAME,a.index_name,
GROUP_CONCAT(column_name ORDER BY seq_in_index) AS colns
FROM information_schema.statistics a
-- where TABLE_SCHEMA=copytrading and TABLE_NAME in(t_trades)
GROUP BY a.TABLE_NAME,a.index_name)ma
where ma.INDEX_NAME <> PRIMARY)cc
JOIN mysql.help_topic b ON b.help_topic_id < (length(cc.colns) - length(REPLACE (cc.colns, ,, ‘‘)) + 1)
group by cc.colns order by 1;

然后拿到postgres,直接执行,这样原来mysql有什么索引,postgres里面也有什么索引了,否则很容易出现同步延时等一些性能问题。

第一章 简单爬取动态页面

标签:服务   head   搜狗   uri   enc   string   enter   over   时间   

原文地址:https://www.cnblogs.com/wby-110/p/13455995.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!