前言 工业互联网平台普遍面临的问题是: 1、在数据完成采集和展示之后,数据如何分析、如何挖掘、如何建模、如何将数据价值变现? 2、不同行业的技术原理、行业知识、基础工艺都不一样,如何建设跨行业跨领域的工业互联网平台? 泛在感知中台是跨行业跨领域的大数据处理中台,可以帮助企业提升平台能力,为企业提供丰 ...
分类:
其他好文 时间:
2021-05-24 13:32:33
阅读次数:
0
典型问题之一:Elasticsearch集群的磁盘被打爆 造成磁盘被打爆有以下几种原因: 索引泛滥,索引接入无流程管控; 索引无生命周期管理; 索引分片数量不合理,单分片过大; 日志类索引未按天等细粒度划分,单索引过大; 多集群复用同一服务器节点; 磁盘容量大小不一。 这些问题比较基础,其实也反映出 ...
分类:
其他好文 时间:
2021-05-24 12:58:48
阅读次数:
0
概述 上节我们安装了一个部署工具 kubeadm , 实践 通过 Taint/Toleration 调整 Master 执行 Pod 的策略 默认情况下 Master 节点是不允许运行用户 Pod 的。而 Kubernetes 做到这一点,依靠的是 Kubernetes 的 Taint/Tolera ...
分类:
其他好文 时间:
2021-05-24 12:28:43
阅读次数:
0
环境 kubernetes 1.20.4 Spring Boot 2.5.0-M3 目标 Service 的 externalIPs 可以设置一个外部的 IP 地址,并且将流量导入到集群内部。 示例 Deploy.yaml apiVersion: apps/v1 kind: Deployment m ...
分类:
其他好文 时间:
2021-05-24 11:56:04
阅读次数:
0
1、报错信息 启动glusterfs文件系统报错,根据网上的排错,基本都是删除glusterfs的数据目录,然并卵。 报错如下: [root@k8s-node2 ~]# systemctl status glusterd.service ● glusterd.service - GlusterFS, ...
分类:
其他好文 时间:
2021-05-24 10:41:35
阅读次数:
0
Morgan Stanley uses Apache Kafka® to publish market data to internal clients and to persist it for replay purposes. We started out using librdkafka’s ...
分类:
编程语言 时间:
2021-05-24 10:27:55
阅读次数:
0
前言 事务(Transaction)是数据库学习中非常重要的一种概念,作为关系型数据库的核心组成,在数据安全方面有着非常重要的作用。 事务在各大数据库中都有非常广泛的应用,并且对于很多业务,例如电商、支付,是保证其可以正常运行的根基。 本文会逐步解析数据库事务的核心特性,以获得对事务更深的理解,主要 ...
分类:
数据库 时间:
2021-05-24 10:21:59
阅读次数:
0
数据守护 DM 数据守护(Data Watch)是一种集成化的高可用、高性能数据库解决方案,是数据库异地容灾的首选方案。数据守护可以配置成实时主备、MPP主备、或读写分离集群,基本不受数据规模的影响,只需数秒时间就可以将备库切换为主库对外提供数据库服务。 实现原理 DM 数据守护(Data Watc ...
分类:
其他好文 时间:
2021-05-24 10:02:33
阅读次数:
0
云原生数据库vitess Vitess 是一个通过分片实现MySQL水平自动扩展的集群数据库系统。 The Vitess Docs | Architecture ...
分类:
数据库 时间:
2021-05-24 10:01:34
阅读次数:
0
cube.js 的预聚合是一个很不错的功能,但是目前是有一些问题的,比如我们包含了大量的数据(几十完,上百万) 目前官方相关的解决方法 数据拆分 基于文件模式的文件处理(比如cubestore支持csv格式的) 基于stream模式的数据处理(目前官方也比较推荐的模式) 一些说明 目前方案都不太好, ...
分类:
Web程序 时间:
2021-05-24 09:57:40
阅读次数:
0