一、RocketMQ组成 1、NameServer 协调者,类似zookeeper,基于内存完成2、Broker 实例3、Topic 4、tag topic里的标签5、Message Queue topic里的队列6、offset 标记消息在Message Queue里的位置,标记消费读取时自增长 ...
分类:
其他好文 时间:
2020-05-07 19:30:48
阅读次数:
70
1.字符串拼接,join和列表的配合使用 a = '' d = ['d','h','t','dg','gh'] a = a.join(i for i in d) print(a) 运行结果: PS D:\Python\Code_Python\lintcode> & D:/python_install ...
分类:
编程语言 时间:
2020-05-06 09:14:44
阅读次数:
71
如何将这么大的数据量均匀地分配到 Kafka 的各个 Broker 上,就成为一个非常重要的问题 为什么分区? Kafka 有主题(Topic)的概念,它是承载真实数据的逻辑容器 而在主题之下还分为若干个分区,也就是说 Kafka 的消息组织方式实际上是三级结构:主题 - 分区 - 消息 主题下的每 ...
分类:
其他好文 时间:
2020-05-03 14:35:58
阅读次数:
72
下半部分主要是 Topic 级别参数、JVM 参数以及操作系统参数的设置 正确设置这些参数是搭建高性能 Kafka 集群的关键因素 Topic 级别参数 如果同时设置了 Topic 级别参数和全局 Broker 参数 答案就是 Topic 级别参数会覆盖全局 Broker 参数的值,而每个 Topi ...
分类:
其他好文 时间:
2020-05-03 14:18:46
阅读次数:
61
1.消费者用--bootstrap-server方式启动,消费的偏移量offset保存在broker的一个主题_consumer_offsets里,此主题默认50个分区。 2.zk中的version-2文件夹存储了关于kafka的一些数据。 3.server.properties里的log.dir项 ...
分类:
其他好文 时间:
2020-05-02 23:17:21
阅读次数:
117
很多参数对系统的影响要比从文档上看更加明显 严格来说这些配置并不单单指 Kafka 服务器端的配置,其中既有 Broker 端参数, 也有主题(后面我用我们更熟悉的 Topic 表示)级别的参数、 JVM 端参数 和操作系统级别的参数 Broker 端参数 目前 Kafka Broker 提供了近 ...
分类:
其他好文 时间:
2020-05-02 23:06:08
阅读次数:
76
一、Kafka架构 Producer :消息生产者,就是向 kafka broker 发消息的客户端; Consumer :消息消费者,向 kafka broker 取消息的客户端; Consumer Group (CG):消费者组,由多个 consumer 组成。消费者组内每个消费者负责消费不同分 ...
分类:
其他好文 时间:
2020-05-01 18:58:23
阅读次数:
71
服务器中重定向有什么需要注意的吗? 答:服务器内部重定向使用forward;外部重定向需要使用URL Broker(代理)来完成, 这样这可以避免线上使用的HTTPS在浏览器中显示“不安全”,还会带来URL维护不一致问题。 例如:可以使用Nginx转发重定向,来避免问题的出现 学习阿里规范 ...
分类:
其他好文 时间:
2020-05-01 14:43:01
阅读次数:
208
RAC 主库配置单实例ADG 2016-11-30 22:38 AlfredZhao 阅读(2906) 评论(0) 编辑 收藏 1.主库准备工作 2.物理备库准备工作 3.创建物理备库 写在前面: 最终实现环境:11.2.0.4版本 2节点RAC + 1节点DG 本文旨在弄清楚整个搭建过程中涉及到的 ...
分类:
其他好文 时间:
2020-04-30 15:30:54
阅读次数:
67