1.1 定义 Kafka 是一个分布式的基于发布/订阅模式的消息队列(Message Queue) , 主要应用于大数据实时处理领域 1.2 消息队列 1.2.1 传统消息队列的应用场景 ? 使用消息队列的好处 1) 解耦允许你独立的扩展或修改两边的处理过程,只要确保它们遵守同样的接口约束。 2) ...
分类:
其他好文 时间:
2021-03-30 13:07:59
阅读次数:
0
Celery是一个简单、灵活且可靠的,处理大量消息的分布式系统,专注于实时处理的异步任务队列,同时也支持任务调度。本系列将通过源码分析,和大家一起深入学习 Celery。本文是系列第二篇,继续探究 Celery 架构。 ...
分类:
其他好文 时间:
2021-03-29 12:19:38
阅读次数:
0
环境:基于composer引入包和thinkphp6+https+workerman. 1.composer引入gatewayworker 使用phpstorm更方便(在composer.json中require中添加这些 phpstorm会自动引入) 或者使用命令行 composer requir ...
分类:
Web程序 时间:
2021-03-29 12:18:46
阅读次数:
0
决方案: Cd到文件位置:C:\Windows\System32\drivers\etc\hosts 输入以下内容: 日期:2021/3/15 搜查到新的地址和IP 已经实时更新! #GitHub Start 140.82.112.3 github.com 140.82.114.4 gist.git ...
分类:
其他好文 时间:
2021-03-18 14:09:26
阅读次数:
0
摘要 Hystrix Dashboard 是Spring Cloud中查看Hystrix实例执行情况的一种仪表盘组件,支持查看单个实例和查看集群实例,本文将对其用法进行详细介绍。 简介 Hystrix提供了Hystrix Dashboard来实时监控HystrixCommand方法的执行情况。 Hy ...
分类:
其他好文 时间:
2021-03-17 14:44:01
阅读次数:
0
DSP(Demand Side Platform):需求方平台。互联网里有成千上万的广告主,他们急需推广自己的产品,寻找优质的媒介和精准的目标用户,优化广告投放策略,提高投入产出比,这种情况下,就诞生了为他们提供专业化服务的平台DSP。简单的说,DSP就是广告主服务平台,广告主可以在平台上设置产品的 ...
分类:
其他好文 时间:
2021-03-16 13:53:03
阅读次数:
0
1、为什么要引入Yarn和Spark。 (1)现有的hadoop生态系统中存在的问题 1)使用mapreduce进行批量离线分析; 2)使用hive进行历史数据的分析; 3)使用hbase进行实时数据的查询; 4)使用storm进行实时的流处理; (2)选用spark的原因 1) 应用于流式计算的S ...
分类:
其他好文 时间:
2021-03-16 13:32:12
阅读次数:
0
阿里云实时计算负责人 - 王峰(莫问)/ FFA_2020-Flink as a Unified Engine - Now and Next-V4 2020年Flink 基于Flink 的流批一体数仓 基于Flink流批一体数据湖架构 PyFlink Flink Native on K8S 双链路数 ...
分类:
其他好文 时间:
2021-03-16 11:59:14
阅读次数:
0
数据应用,是真正体现数仓价值的部分,包括且又不局限于 数据可视化、BI、OLAP、即席查询,实时大屏,用户画像,推荐系统,数据分析,数据挖掘,人脸识别,风控反欺诈,ABtest等等 OLAP(On-Line Analytical Processing):在线分析处理,主要用于支持企业决策管理分析。 ...
分类:
其他好文 时间:
2021-03-16 11:54:33
阅读次数:
0
通过VS Code来实时预览markdown文件的效果,操作如下 新建一个文本文件,然后将其后缀名改成.md 然后用VS Code打开文件 打开命令行,在上菜单栏的view->command palette 或者用快捷键Ctrl+Shift+p 在命令行中输入Markdown: Open Previ ...
分类:
其他好文 时间:
2021-03-15 11:31:18
阅读次数:
0