Hadoop的核心由3个部分组成： HDFS: Hadoop Distributed File System，分布式文件系统，hdfs还可以再细分为NameNode、SecondaryNameNode、DataNode。 YARN: Yet Another Resource Negotiator，资 ...
分类：
其他好文 时间：
2020-06-27 18:39:42
阅读次数：
68
nosql是泛指对关系型数据库的补充，主要代表是redis，memcache，Hbase，MongoDB 一个电商平台主要包括 1.基本信息 用MySQL储存 2.附加信息 用MongoDB储存 3.图片信息 用分布式文件系统储存 4.关键词 Es，Lucene，solr 5.热点信息（特点 高频， ...
分类：
数据库 时间：
2020-06-27 15:52:03
阅读次数：
68
UGO（User/Group/Others） 目前在 Linux/Unix 文件系统中使用，也是使用最广泛的权限控制方式。是一种粗 粒度的文件系统权限控制模式。 ACL（Access Control List）访问控制列表 包括三个方面： 权限模式（Scheme） 1、IP：从 IP 地址粒度进行权 ...
分类：
其他好文 时间：
2020-06-27 13:35:50
阅读次数：
90
Linux通过设置文件的访问权限来控制不同用户对文件或目录的访问操作。Linux将root以外的用户分为3类：文件所有者、所属组和其他用户。每个用户帐号都有唯一的识别号UID和自己所属组的识别号GID。root用户拥有系统最高的操作权限，其用户识别号和所属组的识别号均为0。 drwxr-xr-x 6 ...
分类：
系统相关 时间：
2020-06-27 12:04:05
阅读次数：
91
PHP封装协议 PHP有很多内置URL风格的封装协议，这类协议fopen()，copy()，file_exists()，filesize()等文件系统函数所提供的功能类似。常见协议如下: file:// 访问本地文件系统 http:// 访问HTTP(s)网址 ftp:// 访问FTP(s)URLs ...
分类：
Web程序 时间：
2020-06-27 12:03:11
阅读次数：
101
Docker镜像讲解 镜像概念 镜像是一种轻量级、可执行的独立软件包，用来打包软件运行环境和基于运行环境开发的软件，它包含运行某个软件所需的所有内容，包括代码、运行时、库、环境变量和配置文件 Docker镜像加载原理 UnionFS（联合文件系统） UnionS（联合文件系统）：Union文件系统（ ...
分类：
其他好文 时间：
2020-06-27 00:11:00
阅读次数：
85
在引导Linux开机之前需要先清楚Linux启动的必要或者说是先决条件，这里就是提到了u-boot的作用了引用百度云 主要用于嵌入式系统的引导加载，其实在我调试下来总结一下就是初始化硬件这里的硬件包括必要部分和不必要的部分，比如SOC的时钟，外部RAM（DDR内存），栈等。因为linux的内核相对于 ...
分类：
系统相关 时间：
2020-06-26 22:06:14
阅读次数：
76
一、流处理 1.1 静态数据处理 在流处理之前，数据通常存储在数据库，文件系统或其他形式的存储系统中。应用程序根据需要查询数据或计算数据。这就是传统的静态数据处理架构。Hadoop 采用 HDFS 进行数据存储，采用 MapReduce 进行数据查询或分析，这就是典型的静态数据处理架构。 1.2 流 ...
分类：
其他好文 时间：
2020-06-26 20:02:43
阅读次数：
49
隔离性：namespace namespace（命名隔离） 隔离内容 系统调用参数 内核版本 MNT Namespace mount 提供磁盘挂载点和文件系统的隔离能力 CLONE_NEWNS 2.4.19 IPC Namespace Inter-Process Communication 提供进程 ...
分类：
其他好文 时间：
2020-06-26 16:11:57
阅读次数：
59
恢复内容开始 引子： 我认为docker相比传统的虚拟化技术最大的不同就是不虚拟化内核，使用共享宿主机内核的方式。通过namesapce，联合文件系统，cgroups这三种机制分别从网络，文件以及资源上进行隔离，通过docker镜像快速的实现扩容，这一点在测试进行部署测试环境以及在进行分布式压力测试 ...
分类：
其他好文 时间：
2020-06-26 16:07:27
阅读次数：
68
