运行环境 centos 5.6 hadoop hivesqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具 在使用过程中可能遇到的问题： sqoop依赖zookeeper，所以必须配置ZOOKEEPER_HOME到环境变量中。sq ...
分类：
数据库 时间：
2021-06-07 20:36:05
阅读次数：
0
locker 分布式锁简介 分布式锁目前实现大部分方式 使用mysql 使用redis 使用zookeeper 基于此,成熟的案例有比如redisson 这种官方比较推荐的方案,为了深入研究,准备在这个项目中复现这3种形式的锁 锁的用途 分布式锁主要可以独立于服务之外,主要的目的是在集群中保证同一时 ...
分类：
其他好文 时间：
2021-06-07 20:07:12
阅读次数：
0
2. zookeeper安装 2.1 镜像地址 镜像库地址：http://archive.apache.org/dist/zookeeper/ 我们可以看到，zk的版本是比较多的，我们在使用的时候，应该尽量避免最新的版本 因为新版本中或许会存在某些bug 新版本中的错误，你可能百度也搜不到 所以我们 ...
分类：
其他好文 时间：
2021-06-07 20:00:47
阅读次数：
0
zookeeper3.4.10 kafka 2.11 redis-4.0.2 ps -ef |grep redis 里面有一个 说明没事 mongodb 3.4.3 27017 他的表 叫collection scala 2.11.12 快捷键 1.如果包没有显示出来，需要自行添加， ctrl+al ...
分类：
其他好文 时间：
2021-06-05 18:14:39
阅读次数：
0
我们在开发时，需要知道Zookeeper注册中心都注册了哪些服务，有哪些消费者来消费这些服务。 我们可以通过部署一个管理中心来实现。其实管理中心就是一个web应用，部署到tomcat即可。 安装步骤： （1）将资料中的dubbo-admin-2.6.0.war文件复制到tomcat的webapps目 ...
分类：
其他好文 时间：
2021-06-02 20:49:21
阅读次数：
0
概述 Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目 动物园管理员 工作机制 Zoekeeper从设计模式角度来理解:是一-个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化Zookeepe ...
分类：
其他好文 时间：
2021-06-02 18:07:32
阅读次数：
0
引入依赖 <!-- https://mvnrepository.com/artifact/org.springframework.kafka/spring-kafka --> <dependency> <groupId>org.springframework.kafka</groupId> <art ...
分类：
编程语言 时间：
2021-06-02 14:22:43
阅读次数：
0
Kafka宕机引发的高可用问题 问题要从一次Kafka的宕机开始说起。 笔者所在的是一家金融科技公司，但公司内部并没有采用在金融支付领域更为流行的RabbitMQ，而是采用了设计之初就为日志处理而生的Kafka，所以我一直很好奇Kafka的高可用实现和保障。从Kafka部署后，系统内部使用的Kafk ...
分类：
其他好文 时间：
2021-06-02 14:22:26
阅读次数：
0
一、概述 zookeeper 类似文件系统，client 可以创建节点、更新节点、删除节点，那么如何做到节点的权限的控制呢？zookeeper的access control list 访问控制列表可以做到这一点。 # 语法 # 采用特定的授权策略给特定的对象授予特定的权限 setAcl path a ...
分类：
其他好文 时间：
2021-06-02 14:07:32
阅读次数：
0
