码迷,mamicode.com
首页 >  
搜索关键字:表数据    ( 4292个结果
使用hadoop解决找博客共同好友问题
写在前面 首先我们来看看需求,以下是某博客的好友列表数据,冒号前是一个用户,冒号后是该用户的所有好友(好友关系是单向的): A:B,C,D,F,E,O B:A,C,E,K C:F,A,D,I D:A,E,F,L E:B,C,D,M,L F:A,B,C,D,E,O,M G:A,C,D,E,F H:A, ...
分类:其他好文   时间:2020-09-10 22:33:47    阅读次数:36
8-Pandas扩展之数据透视表
一、什么是数据透视表? 数据透视表(pivot table)是一种在电子表格程序和其他数据分析软件中常用的数据汇总工具。 数据透视表是一种交互式的表,可进行如求和与计算等操作。可以动态的改变版面布置,会立即按照新的布置重新计算数据。 在数据与探索和数据整理时比较常用。 二、数据透视表的创建 方法一: ...
分类:其他好文   时间:2020-08-28 11:42:10    阅读次数:39
数据库快速迁移10亿级数据
我们一直在追求架构的艺术!!问题分析经过几分钟的排查,数据库情况如下:数据库采用Sqlserver2008R2,单表数据量21亿。无水平或者垂直切分,但是采用了分区表。分区表策略是按时间降序分的区,将近30个分区。正因为分区表的原因,系统才保证了在性能不是太差的情况下坚持至今。此表除聚集索引之外,无其他索引,无主键(主键其实是利用索引来快速查重的)。所以在频繁插入新数据的情况下,索引调整所耗费的性
分类:数据库   时间:2020-08-26 17:15:26    阅读次数:70
基于redis实现分布式锁 php
为何需要分布式锁? 在单进程的系统中,当遇到并发情况下,会出现一些数据异常的问题,但是如果这些数据是需要保证唯一性的话,那我们就希望在同一时刻,只能有一个线程在执行这块代码,通常我们一般都是通过简单的加锁或同步来实现并解决这个问题。 但是以上都是单进程多线程的情况,如果出现多进程多线程,显然会出现问 ...
分类:Web程序   时间:2020-08-25 15:43:01    阅读次数:61
从系统报表页面导出20w条数据到本地只用了4秒,我是如何做到的
背景最近有个学弟找到我,跟我描述了以下场景:他们公司内部管理系统上有很多报表,报表数据都有分页显示,浏览的时候速度还可以。但是每个报表在导出时间窗口稍微大一点的数据时,就异常缓慢,有时候多人一起导出时还会出现堆溢出。他知道是因为数据全部加载到jvm内存导致的堆溢出。所以只能对时间窗口做了限制。以避免因导出过数据过大而引起的堆溢出。最终拍脑袋定下个限制为:导出的数据时间窗口不能超过1个月。虽然问题解
分类:其他好文   时间:2020-08-20 19:02:26    阅读次数:87
Truncate和Delete的异同
语法TRUNCATETABLEname参数name是要截断的表的名称或要删除其全部行的表的名称。注释TRUNCATETABLE在功能上与不带WHERE子句的DELETE语句相同:二者均删除表中的全部行。但TRUNCATETABLE比DELETE速度快,且使用的系统和事务日志资源少。DELETE语句每次删除一行,并在事务日志中为所删除的每行记录一项。TRUNCATETABLE通过释放存储表数据所用的
分类:其他好文   时间:2020-08-20 18:30:51    阅读次数:52
Truncate和Delete的异同
语法TRUNCATETABLEname参数name是要截断的表的名称或要删除其全部行的表的名称。注释TRUNCATETABLE在功能上与不带WHERE子句的DELETE语句相同:二者均删除表中的全部行。但TRUNCATETABLE比DELETE速度快,且使用的系统和事务日志资源少。DELETE语句每次删除一行,并在事务日志中为所删除的每行记录一项。TRUNCATETABLE通过释放存储表数据所用的
分类:其他好文   时间:2020-08-20 18:24:16    阅读次数:55
MySQL教程37-MySQL修改/删除字段
这里主要介绍 MySQL 修改和删除数据表字段的方法。 修改字段名称 MySQL 中修改表字段名的语法规则如下: ALTER TABLE <表名> CHANGE <旧字段名> <新字段名> <新数据类型>; 其中: 旧字段名:指修改前的字段名; 新字段名:指修改后的字段名; 新数据类型:指修改后的数 ...
分类:数据库   时间:2020-08-19 19:45:14    阅读次数:86
mysql分库分表篇
1.分库分表介绍1.使用背景当表的数量达到几百上千张表时,众多的业务模块都访问这个数据库,压力会非常的大,考虑对其进行分库当表的数据达到几千万级别,在做很多操作的时候比较吃力,考虑对其进行分库或者分表2.数据切分方案数据气氛根据其切分规则的类型,可以分为两种切分模式:垂直切分:按照业务模块进行切分,将不同模块的表切分到不同的数据库中。水平切分:将一张大表按照一定的切分规则,按照行切分成不同的表或者
分类:数据库   时间:2020-08-18 13:38:21    阅读次数:76
05:数组
在大部分编程语言中,数组都是从0开始编号的,为什么数组要从0开始编号,而不是从1开始呢? 数组(Array)是一种线性表数据结构。它用一组连续的内存空间,来存储一组具有相同类型的数据。 线性表:数组、链表、栈、队列 非线性表:二叉树、堆、图等 在非线性表中,数据之间并不是简单的前后关系 如何实现随机 ...
分类:编程语言   时间:2020-08-15 23:51:18    阅读次数:61
4292条   上一页 1 ... 7 8 9 10 11 ... 430 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!