大家或许都碰到过这样的情况:tomcat挂了,站点应用访问不了service出core了,服务挂了架构设计上,避免单点,使用故障自动转移固然能够保证系统的高可用,是否还有其他的方案,让挂掉的服务自动启动呢,这里给大伙推荐一个常见的运维工具supervisor。画外音:supervisor是很常见的运维工具,以下几个小问题旨在让不熟悉的同学简单了解相关原理,献丑了。supervisor是什么?答:用
分类:
其他好文 时间:
2020-11-18 12:19:56
阅读次数:
3
Hadoop/Hive自带权限控制集群安全下需求:支持多组件,最好能支持当前大数据技术栈的主要组件,HDFS、HBASE、HIVE、YARN、KAFKA等支持细粒度的权限控制,可以达到HIVE列,HDFS目录,HBASE列,YARN队列开源,社区活跃,按照现有的集群情况改动尽可能的小,而且要符合业界的趋势。现有方案:Hadoop、Hive本身的权限控制Kerberos安全认证ApacheRange
分类:
其他好文 时间:
2020-11-18 12:15:31
阅读次数:
8
导语如果之前的单机版hadoop环境安装满足不了你,集群版hadoop一定合你胃口,轻松入手。目录集群规划前置条件配置免密登录3.1生成密匙3.2免密登录3.3验证免密登录集群搭建4.1下载并解压4.2配置环境变量4.4修改配置4.4分发程序4.5初始化4.6启动集群4.7查看集群提交服务到集群1.集群规划这里搭建一个3节点的Hadoop集群,其中三台主机均部署DataNode和NodeManag
分类:
其他好文 时间:
2020-11-18 12:13:01
阅读次数:
6
故障描述: 安装Office 2016后,双击EXCEL文件打开后显示为空白。 解决办法: 开始——运行——regedit 修改HKEY_CLASSES_ROOT\Excel.Sheet.12\shell\Open\command项默认值。 原值: "C:\Program Files\Microso ...
分类:
其他好文 时间:
2020-11-17 12:47:02
阅读次数:
11
背景: 集成一个斑马无线条码打印机,报了一堆错误 classes in a single dex file methods 67667 大于 65536 后来 Unable to get provider com.open.hule.library.downloadmanager.DownloadF ...
分类:
其他好文 时间:
2020-11-17 12:14:45
阅读次数:
5
故障现象:macos和安卓系统某些网络状况,拨入strongswan***,可以打开某网址,如dms.yimitest.com。另一些网络状况下,拨入strongswan***,无法打开此网址。故障原因:可能是MTU问题解决方法:修改***连接MTU值1、macossudoifconfigen0mtu1380或更小sudoifconfigen0mtu1360多次尝试2、安卓客户端
分类:
Web程序 时间:
2020-11-17 12:08:23
阅读次数:
16
1、hbase数据flush过程 1)当MemStore数据达到阈值(默认是128M,老版本是64M),将数据刷到硬盘,将内存中的数据删除,同时删除HLog中的历史数据; 2)并将数据存储到HDFS中; 3)在HLog中做标记点。 2、数据合并过程 1)当数据块达到4块,hmaster将数据块加载到 ...
分类:
其他好文 时间:
2020-11-17 11:47:51
阅读次数:
3
1、大数据有哪些特点? valume(大量) velocity(高速) variety(多样) value(低价值密度) 2、什么是大数据? 指无法在一定的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信 ...
分类:
其他好文 时间:
2020-11-16 13:51:20
阅读次数:
9
Rowkey设计时需要遵循三大原则: 1. 唯一性原则 rowkey在设计上保证其唯一性。rowkey是按照字典顺序排序存储的,因此,设计rowkey的时候,要充分利用这个排序的特点,将经常读取的数据存储到一块,将最近可能会被访问的数据放到一块。 2. 长度原则 rowkey是一个二进制码流,可以是 ...
分类:
其他好文 时间:
2020-11-13 13:05:38
阅读次数:
7