https://kafka.apachecn.org/intro.html 一、kafka能做什么？ 构造实时流数据管道，它可以在系统或应用之间可靠地获取数据。 (相当于message queue) 构建实时流式应用程序，对这些流数据进行转换或者影响。 (就是流处理，通过kafka stream t ...
分类：
其他好文 时间：
2021-07-01 17:05:23
阅读次数：
0
1. 管道相关命令 1.1 cut cut：以某种方式按照文件的行进行分割 参数列表： 参数 英文 含义 -c characters 按字符选取 -b 按字节选取 忽略多字节字符边界，除非也指定了 -n 标志 -d '分隔符' delimiter 自定义分隔符，默认为制表符。 -f 'n1,n2' ...
分类：
系统相关 时间：
2021-02-26 13:01:54
阅读次数：
0
现如今，Kafka已不再是一个单纯的消息队列系统。Kafka是一个分布式的流处理平台，被越来越多的公司使用，Kafka可以被用于高性能的数据管道，流处理分析，数据集成等场景。本文分享总结了几个Kafka常见的面试问题，希望对你有所帮助。主要包括以下内容：Kafka是如何保障数据不丢失的？如何解决Kafka数据丢失问题？Kafka可以保障永久不丢失数据吗？如何保障Kafka中的消息是有序的？如何确定
分类：
其他好文 时间：
2020-09-17 23:41:36
阅读次数：
33
1.引言在本教程中，我们将了解如何使用事件数据和ApacheDruid.我们将介绍事件数据和Druid体系结构的基础知识。作为其中的一部分，我们将创建一个简单的数据管道，利用Druid的各种特性，包括各种数据接收模式和查询准备好的数据的不同方法。2.基础概念在深入讨论ApacheDruid的操作细节之前，让我们先了解一些基本概念。最感兴趣的是大规模事件数据的实时分析。因此，我们必须理解事件数据的含
分类：
Web程序 时间：
2020-08-24 16:48:37
阅读次数：
55
Kafka多维度系统精讲，从入门到熟练掌握Kafka几乎是当今时代背景下数据管道的首选，无论你是做后端开发、还是大数据开发，对它可能都不陌生。可是市面上全面系统讲解Kafka的课程有多少呢？寥寥无几。本课从搭建开始，带你平滑上手。全面剖析Kafka，解读和使用核心API，并将底层实现和设计原理融合贯穿。同时注重结合案例，把原理落地。更有凝结老师心血的Kafka最佳配置方式推荐，以及面试常问知识点梳
分类：
其他好文 时间：
2020-06-10 14:45:08
阅读次数：
82
Kafka多维度系统精讲，从入门到熟练掌握Kafka几乎是当今时代背景下数据管道的首选，无论你是做后端开发、还是大数据开发，对它可能都不陌生。可是市面上全面系统讲解Kafka的课程有多少呢？寥寥无几。本课从搭建开始，带你平滑上手。全面剖析Kafka，解读和使用核心API，并将底层实现和设计原理融合贯穿。同时注重结合案例，把原理落地。更有凝结老师心血的Kafka最佳配置方式推荐，以及面试常问知识点梳
分类：
其他好文 时间：
2020-06-10 11:12:18
阅读次数：
50
一、kafka 介绍 1.1、kafka 介绍 Kafka 是一个分布式消息引擎与流处理平台，经常用做企业的消息总线、实时数据管道，有的还把它当做存储系统来使用。 早期 Kafka 的定位是一个高吞吐的分布式消息系统，目前则演变成了一个成熟的分布式消息引擎，以及流处理平台。 Kafka 主要起到削峰 ...
分类：
其他好文 时间：
2020-06-04 19:38:12
阅读次数：
162
Kafka 创建背景 Kafka 是一个消息系统，原本开发自 LinkedIn，用作 LinkedIn 的活动流（Activity Stream）和运营数据处理管道（Pipeline）的基础。现在它已被多家不同类型的公司 作为多种类型的数据管道和消息系统使用。 活动流数据是几乎所有站点在对其网站使用 ...
分类：
其他好文 时间：
2020-06-02 13:23:04
阅读次数：
70
Kafka是什么 Kafka最初是由LinkedIn公司采用Scala语言开发的一个分布式、多分区、多副本且基于ZooKeeper协调的内部基础设置，现已捐献给Apache基金会。Kafka是一个流平台，主要用来发布和订阅数据流，是流式数据处理的利器。Kafka用于构建实时数据管道和流应用程序，具有 ...
分类：
其他好文 时间：
2020-05-18 20:50:54
阅读次数：
67
感谢参考原文-http://bjbsair.com/2020-04-01/tech-info/18512.html目标：使用Kafka和使用Redis的服务层编写数据管道。先决条件请根据您的操作系统安装以下组件：·Kafka·Zookeeper·Redis·Java目标观众本文针对的是正在构建第一个数据管道的工程师。但是，已建立数据管道的工程师可以快速浏览它。期待什么关于如何建立数据管道的概念证明
分类：
其他好文 时间：
2020-04-02 17:53:02
阅读次数：
59
