一、什么是粘包拆包? 粘包拆包是TCP协议传输中一种现象概念。TCP是传输层协议,他传输的是“流”式数据,TCP并不知道传输是哪种业务数据,或者说,并不关心。它只是根据缓冲区状况将数据进行包划分,然后进行传输。 在这个前提下,就有可能发生发生同一个业务数据被分割程多个数据包,或者多个业务数据被打包到 ...
分类:
其他好文 时间:
2020-06-20 16:37:03
阅读次数:
48
大数据时代,多数的web或app产品都会使用第三方或自己开发相应的数据系统,进行用户行为数据或其它信息数据的收集,在这个过程中,埋点是比较重要的一环。埋点收集的数据一般有以下作用: 1. 驱动决策:ABtest、漏斗优化、用户增长、bug修复、精准营销、流失用户预警 2. 驱动产品智能:智能推荐(千 ...
分类:
其他好文 时间:
2020-06-18 19:09:40
阅读次数:
112
恢复的实现技术 一、数据转储 1.定义 2.转储方法 ⅰ静态转储与动态转储 ⅱ海量转储与增量转储 ⅲ转储方法小结 二、登记日志文件 1.日志文件的格式和内容 ⅰ以记录为单位的日志文件内容 ⅱ以数据块为单位的日志文件 2.日志文件的作用 3.登记日志文件 三、小结 参考-《数据系统概论(第五版)》-人 ...
分类:
数据库 时间:
2020-06-12 12:50:19
阅读次数:
57
关系数据库系统的查询优化 一、查询优化概述 1.查询优化的优点 2.查询优化的好处 3.查询优化的总目标 二、一个实例 参考-《数据系统概论(第五版)》-人民大学-王珊 ...
分类:
数据库 时间:
2020-06-12 10:51:15
阅读次数:
47
数智时代,数据量呈现爆炸式增长,根据IDC预测,到2025年,全球数据将增长61%,达到175ZB。海量数据不仅带来了数据红利,也让企业的数据系统不堪重负,没有一款性能强大的数据库引擎傍身,何以洞悉数据背后的价值? 面对海量数据,您常用的数据库系统或查询引擎有哪些?他们有哪些优势?在日常工作中遇到过 ...
分类:
数据库 时间:
2020-06-07 14:42:43
阅读次数:
115
1、前言伴随着IT技术的飞速发展,人类社会已步入信息化时期,人类活动和社会经济发展所累积的专业知识和工作经验依靠智能化技术积累成大量的数据资源。步入二十一世纪,随着互联网技术、移动互联和物联网技术的盛行,数据资源正展现为类型和经营规模的迅速扩大,比如中国电商企业淘宝公司每日均值约有6000万账号登录和20亿PV,沪深两市每日4个钟头的交易时间会产生三亿条以上逐笔成交数据,腾讯企业各种数据储存量(经
分类:
其他好文 时间:
2020-05-29 17:41:25
阅读次数:
56
1、前言 伴随着IT技术的飞速发展,人类社会已步入信息化时期,人类活动和社会经济发展所累积的专业知识和工作经验依靠智能化技术积累成大量的数据资源。步入二十一世纪,随着互联网技术、移动互联和物联网技术的盛行,数据资源正展现为类型和经营规模的迅速扩大,比如中国电商企业淘宝公司每日均值约有6000万账号登 ...
分类:
其他好文 时间:
2020-05-29 12:10:42
阅读次数:
124
方案概述数据迁移是数据系统整合中保证系统平滑升级和更新的关键部分。在信息化建设过程中,随着技术的发展,原有的系统从启用到被新系统取代,在其使用期间往往积累了大量珍贵的历史数据,其中许多历史数据都是新系统顺利启用所必须的。另外,这些历史数据也是进行决策分析的重要依据。数据迁移,就是将这些历史数据进行清洗、转换,并装载到新系统中的过程。银行、电信、税务、工商、保险等行业进行系统切换时,数据迁移的成功与
分类:
其他好文 时间:
2020-05-27 10:37:23
阅读次数:
88
该书大约是2017年翻译的,全书392页,分为三部分,一共12章。 这是一本理论结合实践的书。 本书为数据系统的设计、实现、评价提供了很好的概念框架。 本书着重讨论三个在大多数软件系统中都很重要的问题: 可靠性(Reliability) 系统在困境(adversity)(硬件故障、软件故障、人为错误 ...
分类:
其他好文 时间:
2020-05-24 11:23:37
阅读次数:
50