码迷,mamicode.com
首页 >  
搜索关键字:kafka 集群 大数据    ( 36201个结果
后端API多节点集群部署
一.多节点启动 节点1:1.117.173.54:8080 节点2:1.117.173.54:8088 二.配置nginx集群访问 在server结点上方添加 upstream lbs { server 1.117.173.54:8080; server 1.117.173.54:8088; 在se ...
分类:Windows程序   时间:2021-07-01 17:08:31    阅读次数:0
Kafka入门(一)-基础概念
https://kafka.apachecn.org/intro.html 一、kafka能做什么? 构造实时流数据管道,它可以在系统或应用之间可靠地获取数据。 (相当于message queue) 构建实时流式应用程序,对这些流数据进行转换或者影响。 (就是流处理,通过kafka stream t ...
分类:其他好文   时间:2021-07-01 17:05:23    阅读次数:0
4.mongo分片集群
常见mongodb部署架构 1.为什么要是用分片集群 ? 数据容量日益增大,访问性能日渐降低,怎么破? 新品上线异常火爆,如何支撑更多的并发用户? 单库已有 10TB 数据,恢复需要1-2天,如何加速? 地理分布数据 2.分片如何解决 如何分片 >>>> 完整的分片集群 mongos:路由节点 1. ...
分类:其他好文   时间:2021-07-01 16:29:57    阅读次数:0
kingbaseES R6 集群手工切换案例
1、当前集群状态 [kingbase@ECOLABAPP37 bin]$ ./repmgr cluster show ID | Name | Role | Status | Upstream | Location | Priority | Timeline | Connection string + ...
分类:其他好文   时间:2021-07-01 16:27:49    阅读次数:0
看CarbonData如何用四招助力Apache Spark
摘要:CarbonData 在 Apache Spark 和存储系统之间起到中介服务的作用,为 Spark 提供的4个重要功能。 本文分享自华为云社区《Make Apache Spark better with CarbonData》,原文作者:大数据修行者 。 Spark 无疑是一个强大的处理引擎 ...
分类:Web程序   时间:2021-06-30 18:44:44    阅读次数:0
kafka与celery的区别
kafka它们属于消息队列;celery它们属于任务队列。 消息队列和任务队列,最大的不同之处就在于理念的不同 -- 消息队列传递的是“消息”,任务队列传递的是“任务”。 我们可以放到具体的应用场景上: 消息队列用来快速消费队列中的消息。比如日志处理场景,我们需要把不同服务器上的日志合并到一起,这时 ...
分类:其他好文   时间:2021-06-30 18:33:26    阅读次数:0
简单介绍云技术
关于云技术的文章很多,我也就不介绍那些非常技术性的东西了,主要分享一些我在学习云技术的时候了解了些什么,以及我工作中接触到云的时候,主要考虑的问题。 云基本定义 云的专业定义在百科和其他blog上面都会写,我就不引用了,简单来说,云技术是一种可以整合闲置资源进行动态分配和按需分配的技术。其中资源主要 ...
分类:其他好文   时间:2021-06-30 18:28:56    阅读次数:0
MGR由5.7.24升级至8.0.20记录
升级原因 5.7版本的MGR多主模式存在比较严重的问题,无法预知和监控的认证故障,会导致部分行数据无法修改,故急需升级至8.0 升级流程 原集群有5个节点,首先扩容一个5.7.24的节点,将其升级为8.0.20的实例(注意参数的变化,如果数据量比较小,可以采用导出导入的方式,由于mysql8升级非常 ...
分类:其他好文   时间:2021-06-30 17:59:42    阅读次数:0
python-- kafka(一): kafka 安装和查询
kafka 应用数据读取理论生产者和消费者 生产者:生产数据 消费者:消费生产者产生的数据 对应关系:一个任务可以有多个分组,可以对应多个消费者,但消费者数量不能大于生产者分组数量,多余的也是无用的。(多对多的中的一对一关系) 特性:kafka只需写入一次,可以支持任意多的应用读取全部数据,如果应用 ...
分类:编程语言   时间:2021-06-30 17:51:24    阅读次数:0
python --kakfa(三):kafka模块生产和消费数据
文章目录一、kafka是什么?二、使用步骤1. 安装1.引入库2.消费端:读取数据3.发送端:发送数据总结一、kafka是什么?kafka 是一个分布式流式计算平台。而在大部分企业开发人员中,都是把 kafka 当成消息系统使用,即它是一个分布式消息队列,很少会使用 kafka 的流式计算。它有四个 ...
分类:编程语言   时间:2021-06-30 17:50:03    阅读次数:0
36201条   上一页 1 2 3 4 5 ... 3621 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!