码迷,mamicode.com
首页 > 其他好文 > 详细

kafka2.5.0自定义分区器

时间:2020-06-25 15:30:00      阅读:55      评论:0      收藏:0      [点我收藏+]

标签:string   target   kafka   byte   cli   clu   log   lan   client   

自定义分区器:

import org.apache.kafka.clients.producer.Partitioner;
import org.apache.kafka.common.Cluster;
import org.apache.kafka.common.PartitionInfo;

import java.util.List;
import java.util.Map;

/**
 * @author King老师   
 */
public class SelfPartitioner implements Partitioner {
    public int partition(String topic, Object key, byte[] keyBytes,
                         Object value, byte[] valueBytes, Cluster cluster) {
        //拿到
        List<PartitionInfo> partitionInfos = cluster.partitionsForTopic(topic);
        //TODO 分区数
        int num = partitionInfos.size();
        //TODO 根据value与分区数求余的方式得到分区ID
        int parId = ((String)value).hashCode()%num;
        return parId;
    }

    public void close() {
        //do nothing
    }

    public void configure(Map<String, ?> configs) {
        //do nothing
    }

}

配置到kafka:

ProducerConfig.PARTITIONER_CLASS_CONFIG, "cn.enjoyedu.selfpartition.SelfPartitioner"

更多配置参考:《kafka2.5.0生产者与消费者配置详解

 

end.

kafka2.5.0自定义分区器

标签:string   target   kafka   byte   cli   clu   log   lan   client   

原文地址:https://www.cnblogs.com/zhuwenjoyce/p/13191646.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!