?曾经在你的应用程序中使用过异步处理吗?在处理不需要立即执行的任务时，异步代码似乎是不可避免的。Apache Kafka是最常用和最健壮的开源事件流平台之一。许多公司和开发者利用它的强大功能来创建高性能的异步操作，用于微服务的数据集成，以及用于应用程序健康指标的监控工具。这篇文章解释了在.NET应用 ...
分类：
Web程序 时间：
2021-02-23 14:04:35
阅读次数：
0
数字孪生 利用GIS+BIM时空模型、传感器更新、运行历史等数据，集成多学科、多物理量、多尺度、多概率的仿真过程，在虚拟空间中完成映射，从而反映相对应的实体装备的全生命周期过程。 万物皆可数字孪生 人，物，设备，建筑，城市…… 物理世界的万事万物，在数字世界都有孪生体，平行发展、相互作用 数字世界形 ...
分类：
其他好文 时间：
2020-10-30 11:58:10
阅读次数：
20
现如今，Kafka已不再是一个单纯的消息队列系统。Kafka是一个分布式的流处理平台，被越来越多的公司使用，Kafka可以被用于高性能的数据管道，流处理分析，数据集成等场景。本文分享总结了几个Kafka常见的面试问题，希望对你有所帮助。主要包括以下内容：Kafka是如何保障数据不丢失的？如何解决Kafka数据丢失问题？Kafka可以保障永久不丢失数据吗？如何保障Kafka中的消息是有序的？如何确定
分类：
其他好文 时间：
2020-09-17 23:41:36
阅读次数：
33
SpringCloudFlow与ApacheSpark集成点击左上角，关注：“锅外的大佬”专注分享国外最新技术内容帮助每位开发者更优秀地成长1.简介SpringCloudDataFlow是用于构建数据集成和实时数据处理管道的工具包。在这种情况下，管道(Pipelines)是使用SpringCloudStream或SpringCloudTask框架构建的SpringBoot应用程序。在本教程中，我们
分类：
编程语言 时间：
2020-09-07 19:17:49
阅读次数：
55
1. 简介：DMETL(目前的版本是4.0)是达梦数据库有限公司在上十年数据处理经验的基础上，研制开发的具有自主版权的、商品化的数据集成软件，实现了对数据抽取、传输、整合、以及装载的一站式支持，是构建数据中心、数据仓库、数据交换和数据同步等应用的理想工具。 同类型ETL工具有：informatic、 ...
分类：
其他好文 时间：
2020-08-15 22:27:37
阅读次数：
62
数据处理的工作时间占整个数据分析项目的70%以上，因此，数据的质量直接决定了分析模型的准确性。那么，数据预处理的方法是什么呢？例如数据清理、数据集成、数据规范、数据转换等，其中最常用的是数据清理和数据集成，下面中琛魔方将来详细介绍一下这2种方法。 数据预处理的方法 1、数据清洗 数据清洗是通过填补缺失值，平滑或删除离群点，纠正数据的不一致来达到清洗的目的。简单来说，就是把数据里面哪些缺胳
分类：
其他好文 时间：
2020-08-13 11:52:24
阅读次数：
51
数据准备基本流程 数据规范化的几种方法 利用SciKit库进行数据变换 数据准备流程 数据清洗 数据集成 是什么？就是将多个数据源合并存放在一个数据仓库中 数据集成的两种架构 ETL（Extract、Transform、Load）即，（抽取、转换(合并表)、加载） 常见ETL工具（开源）：kettl ...
分类：
其他好文 时间：
2020-08-01 12:44:01
阅读次数：
91
数据分析基本流程 Python基本数据类型 Python各种括号的使用方式 数据分析基本流程 数据采集 数据挖掘 理解业务需求，对挖掘目标进行定义 理解数据：进行数据描述，数据质量验证 数据准备：收集数据（数据导入与导出）、数据清洗、数据集成 建模：选择和应用各种数据挖掘类型 数据可视化 报表工具 ...
分类：
编程语言 时间：
2020-07-26 15:04:48
阅读次数：
64
SmartbiMining通过深度数据建模，为企业提供预测能力支持文本分析、五大类算法和数据预处理，并为用户提供一站式的流程式建模、拖拽式操作和可视化配置体验。SmartbiMining算法丰富，而且可扩展SmartbiMining数据挖掘平台支持多种高效实用的机器学习算法，包含了分类、回归、聚类、预测、关联，5大类机器学习的成熟算法。其中包含了多种可训练的模型：逻辑回归、决策树、随机森林、朴素贝
分类：
其他好文 时间：
2020-06-19 16:04:38
阅读次数：
182
XML解析——Java中XML的四种解析方式 XML是一种通用的数据交换格式,它的平台无关性、语言无关性、系统无关性、给数据集成与交互带来了极大的方便。XML在不同的语言环境中解析方式都是一样的,只不过实现的语法不同而已。 XML的解析方式分为四种：1、DOM解析；2、SAX解析；3、JDOM解析； ...
分类：
其他好文 时间：
2020-05-18 12:09:57
阅读次数：
49
