1、基本概念 （1）数据分类 结构化数据：具有固定格式或有限长度的数据，如：数据库、元数据等 非结构化数据：不定长或无固定格式的数据，如：邮件、word文档等 （2）非结构化数据的查询方法 顺序扫描法： 所谓顺序扫描，比如要找内容包含某一个字符串的文件，就是一个文档一个文档的看，对于每一个文档，从头 ...
分类：
Web程序 时间：
2020-07-10 13:25:27
阅读次数：
67
在我们的项目中，通常会把数据存储到关系型数据库中，比如Oracle,SQL Server,Mysql等，但是关系型数据库对于并发的支持并不是很强大，这样就会造成系统的性能不佳，而且存储的数据多为结构化数据，对于非结构数据（比如文本）和半结构化数据（比如JSon） 就显得不够灵活，而非关系型数据库则很 ...
一、概述 Hive是什么？ Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据。它架构在Hadoop之上，总归为大数据，并使得查询和分析方便。 最初，Hive是由Facebook开发，后来由Apache软件基金会开发，并作为进一步将它作为名义下Apache Hive为一个开源项目。它用 ...
分类：
其他好文 时间：
2020-06-30 17:16:56
阅读次数：
54
参考《人人都是架构师》 大型网站几乎时时刻刻都在接收着高并发和海量数据的洗礼，随着用户规模的线性上升，单库的性能瓶颈会逐渐暴露出来，由于数据的检索效率越来越慢，导致生产环境中产生较多的慢速SQL。对于非结构化数据，可以采用将其存储在NoSQL数据中来提升性能，但是重要的业务数据，仍然要落盘在关系型数 ...
分类：
数据库 时间：
2020-06-29 00:11:53
阅读次数：
82
储存方面：数据湖中数据为非结构化的，所有数据都保持原始形式；存储所有数据，并且仅在分析时再进行转换。数据仓库就是数据通常从事务系统中提取，在将数据加载到数据仓库之前，会对数据进行清理与转换。 数据组织形式：数据湖就是捕获半结构化和非结构化数据。而数据仓库则是捕获结构化数据并将其按模式组织。 用途：数 ...
分类：
其他好文 时间：
2020-06-28 20:54:41
阅读次数：
67
第一章 数据库的四个特点 数据结构化 数据共享性高，冗余度低，伸缩性强 数据独立性高 数据由数据库管理系统统一管理和控制 数据模型的组成要素 P18 数据结构 数据操作 数据的完整性约束条件 关系模型 关系：通常说的一张表 元组：表中的一行即为一个元组 属性：表中的一列即为一个属性 码： 表中的某个 ...
分类：
数据库 时间：
2020-06-26 11:03:47
阅读次数：
447
在当今的云计算世界中，对象存储是一种使用HTTP API存储和检索非结构化数据和元数据对象的工具。这样的服务不是将文件分成块并使用文件系统将它们存储在磁盘上，而是与存储在网络上的整个对象一起工作。
分类：
其他好文 时间：
2020-06-24 16:22:30
阅读次数：
382
NoSQL简介 NoSQL，全名为Not Only SQL，指的是非关系型的数据库 随着访问量的上升，网站的数据库性能出现了问题，于是nosql被设计出来 优点/缺点 优点: 高可扩展性 分布式计算 低成本 架构的灵活性，半结构化数据 没有复杂的关系 缺点: 没有标准化 有限的查询功能（到目前为止） ...
分类：
其他好文 时间：
2020-06-21 16:01:59
阅读次数：
47
Microsoft SQL Server 2016企业版是一个全面的数据库平台，使用集成的商业智能(BI)工具提供了企业级的数据管理。Microsoft SQL Server 数据库引擎为关系型数据和结构化数据提供了更安全可靠的存储功能，使您可以构建和管理用于业务的高可用和高性能的数据应用程序。 M ...
分类：
数据库 时间：
2020-06-19 22:46:42
阅读次数：
276
结构化搜索针对日期、时间、数字等结构化数据的搜索，它们有自己的格式，我们可以对它们进行范围，比较大小等逻辑操作，并引入实战案例进行演示，最后介绍了filter的过滤原理及缓存处理机制。
分类：
其他好文 时间：
2020-06-01 15:41:40
阅读次数：
61
