tar——压缩数据/解压数据内容 命令语法: tar zcvf 生成压缩包路径/压缩包.tar.gz 压缩数据01，02，03.... 巧记： 压缩名称为tar.gz，可以理解为tar命令，gz取压缩类型gizp的前2个辅音字母 参数说明: z 数据压缩方式 gzip （--gzip, --gunz ...
分类：
其他好文 时间：
2019-12-17 22:07:47
阅读次数：
106
PCA(主成分分析)方法浅析 降维、数据压缩 找到数据中最重要的方向：方差最大的方向，也就是样本间差距最显著的方向 在与第一个正交的超平面上找最合适的第二个方向 PCA算法流程 上图第一步描述不正确，应该是去中心化，而不是中心化 具体来说，投影这一环节就是：将与特征值对应的k个特征向量分别作为行向量 ...
分类：
其他好文 时间：
2019-11-30 21:07:21
阅读次数：
116
OSI是Open System Interconnection的缩写，意为开放式系统互联。国际标准化组织（ISO）制定了OSI模型，该模型定义了不同计算机互联的标准，是设计和描述计算机网络通信的基本框架。OSI模型把网络通信的工作分为7层，分别是物理层、数据链路层、网络层、传输层、会话层、表示层和应 ...
分类：
其他好文 时间：
2019-11-29 10:42:43
阅读次数：
88
原理 聚类、高维可视化、数据压缩、特征提取 自组织映射神经网络本质上是一个两层的神经网络，包含输入层和输出层（竞争层）输出层中神经元的个数通常是聚类的个数 训练时采用“竞争学习”方式，每个输入在输出层中找到一个和它最匹配的节点，称为激活节点。紧接着用随机梯度下降法更新激活节点的参数，同时，激活节点临 ...
分类：
其他好文 时间：
2019-11-24 15:45:03
阅读次数：
87
应用层 1.用户与网络的界面，所有能和用户交互产生网络流量的程序 典型应用层服务：FTP、SMTP、HTTP 表示层 1.用于处理在两个通信系统中交换信息的标识方式 功能1：数据格式变换（翻译） 功能2：数据加密解密 功能3：数据压缩和回复 主要协议：JPEG、ASCII 会话层 1.用户进程提供建 ...
分类：
其他好文 时间：
2019-11-24 12:14:12
阅读次数：
91
一、Huffman算法介绍 霍夫曼编码（英语：Huffman Coding），又译为哈夫曼编码、赫夫曼编码，是一种用于无损数据压缩的熵编码（权编码）算法。在计算机数据处理中，霍夫曼编码使用变长编码表对源符号（如文件中的一个字母）进行编码，其中变长编码表是通过一种评估来源符号出现几率的方法得到的，出现 ...
分类：
编程语言 时间：
2019-11-22 01:27:33
阅读次数：
150
HBase 安装snappy压缩软件以及相关编码配置 前言 ? 在使用HBase过程中因为数据存储冗余、备份数等相关问题占用过多的磁盘空间，以及在入库过程中为了增加吞吐量所以会采用相关的压缩算法来压缩数据，降低存储空间和在入库过程中通过数据压缩提高吞吐量。 一、HBase安装Snappy压缩软件 h ...
分类：
移动开发 时间：
2019-11-20 18:02:28
阅读次数：
126
一、数据压缩在hadoop中的意义1、基本概述?压缩技术可以减少底层hdfs的读写字节数。并且能够降低在数据传输过程中占用的网络带宽资源，以及降低占用的磁盘空间。而在MapReduce中，shuffle以及merge过程都面临着巨大的IO压力。但是要注意增加了压缩，另外一方面会增加cpu的负载。所以在要权衡好是否采用压缩，以及采用的压缩算法的特性。2、压缩应用基本原则运算密集型的job，少用压缩。
分类：
其他好文 时间：
2019-10-29 13:44:07
阅读次数：
84
本文源码：GitHub·点这里||GitEE·点这里一、ClickHouse简介1、基础简介Yandex开源的数据分析的数据库，名字叫做ClickHouse，适合流式或批次入库的时序数据。ClickHouse不应该被用作通用数据库，而是作为超高性能的海量数据快速查询的分布式实时处理平台，在数据汇总查询方面(如GROUPBY)，ClickHouse的查询速度非常快。下载仓库：https://repo
分类：
数据库 时间：
2019-10-29 00:24:35
阅读次数：
128
图像细化 细化技术：把一个平面区域简化成图的结构形状表示法骨架：一种细化结构，它是目标的重要拓扑描述，具有非常广泛的应用。在图像识别或数据压缩时，经常用细化结构。例如：在识别字符之前，往往要先对字符作细化处理，求出字符的细化结构。细化的作用：目的将图像的骨架提取出来的同时，保持图像细小部分的连通性， ...
分类：
其他好文 时间：
2019-10-26 19:18:30
阅读次数：
270
