Zookeeper作为一个分布式协调系统提供了一项基本服务: 分布式锁服务 ,分布式锁是分布式协调技术实现的核心内容。像配置管理、任务分发、组服务、分布式消息队列、分布式通知/协调等,这些应用实际上都是基于这项基础服务由用户自己摸索出来的。 1.Zookeeper在大数据系统中的常见应用 zooke ...
分类:
其他好文 时间:
2018-09-22 18:24:48
阅读次数:
202
今天跟大伙一起聊聊分布式系统的架构的套路。在开始说套路之前,大家先思考一个问题,为什么要进行分布式架构? 大多数的开发者大多数的系统可能从来没接触过分布式系统,也根本没必要进行分布式系统架构,为什么?因为在访问量或者QPS没有达到单台机器的性能瓶颈的时候,根本没必要进行分布式架构。那如果业务量上来了 ...
分类:
其他好文 时间:
2018-09-22 12:52:53
阅读次数:
156
公司1:软件方向 一、dubbo dubbo原理模型? dubbo注册中心 有哪些?你常用的是什么? 延伸,可以问,dubbo 通讯方式有哪些?具体原理是什么?每种注册中心的运行机制? 二、Redis Redis应用场景有哪些? 工作中如何实际使用Redis? Redis的数据类型有哪些? 三、设计 ...
分类:
编程语言 时间:
2018-09-21 11:35:54
阅读次数:
159
一、平台基本功能 1. 数据接入 2. 数据存储和查询,存储模型应包括关系型模型,非关系型模型,文档模型等。 3. 数据计算,包括离线批处理,实时计算,机器学习,多维分析和全文检索。 4. 平台安全与管理,解决用户管理,数据隔离,访问授权,访问控制和集群服务安全等问题。 5. 平台辅助工具,如程序开 ...
分类:
其他好文 时间:
2018-09-18 00:29:33
阅读次数:
185
大数据已经火了很久了,一直想了解它学习它结果没时间,了解了一些资料,结合我自己的情况,整理了一个学习路线,。 学习路线 Linux(shell,高并发架构,lucene,solr) Hadoop(Hadoop,HDFS,Mapreduce,yarn,hive,hbase,sqoop,zookeepe ...
分类:
其他好文 时间:
2018-09-17 13:34:04
阅读次数:
148
在安装ZooKeeper之前,请确保你的系统是在以下任一操作系统上运行: 任意Linux OS - 支持开发和部署。适合演示应用程序。 Windows OS - 仅支持开发。 Mac OS - 仅支持开发。 任意Linux OS - 支持开发和部署。适合演示应用程序。 Windows OS - 仅支 ...
分类:
其他好文 时间:
2018-09-01 15:16:00
阅读次数:
170
安装工具 VMware_workstation_full_12.5.2 CentOS6-Base-163 CentOS-6.4-x86_64-bin-DVD1.iso VM运行配置 双击运行VM 运行界面 点击下一步 如图操作,选择“稍后安装操作系统”,点击下一步 如图操作,选择Linux、Cent ...
分类:
其他好文 时间:
2018-08-30 14:23:19
阅读次数:
173
docker run d name zookeeper publish 2181:2181 volume /etc/localtime:/etc/localtime wurstmeister/zookeeper docker run d name kafka publish 9092:9092 li ...
分类:
其他好文 时间:
2018-08-28 20:24:15
阅读次数:
166
https://issues.apache.org/jira/browse/FLINK-10030 https://issues.apache.org/jira/browse/FLINK-10011 https://github.com/apache/flink/pull/6590/commits/ ...
分类:
其他好文 时间:
2018-08-28 17:03:10
阅读次数:
171
不知道配置文件上次什么时候修改的、修改了什么内容?改了配置文件还要重新发布项目或者手动触发重启服务?无缘无故发现配置文件错了影响到线上正常部署?你是否正在因为这些问题而困扰?50+线上项目,数百+配置文件,我们经常被这些配置文件虐的生无可恋,是时候作出改变了!本文将带你解决这些问题,喝着咖啡轻松运维 ...
分类:
其他好文 时间:
2018-08-24 10:47:52
阅读次数:
162