码迷,mamicode.com
首页 >  
搜索关键字:计算引擎    ( 142个结果
spark
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapRe ...
分类:其他好文   时间:2019-05-26 18:25:54    阅读次数:104
JStorm学习
一、简介 JStorm是一个分布式实时计算引擎。JStorm是一个类似于Hadoop MapReduce的系统,用户按照指定的接口实现一个任务,然后将这个任务交给JStorm系统,JStorm将这个任务跑起来,并按7*24小时运行。如果中间一个worker发生了意外故障,调度器立即分配一个新的wor ...
分类:Web程序   时间:2019-05-20 13:12:01    阅读次数:116
上:Spark VS Flink – 下一代大数据计算引擎之争,谁主沉浮?
本文对 Spark 和 Flink 的技术与场景进行了全面分析与对比,且看下一代大数据计算引擎之争,谁主沉浮?
分类:其他好文   时间:2019-04-28 18:32:28    阅读次数:148
Hadoop大数据分析应用场景
J 为了满足日益增长的业务变化,京东的京麦团队在京东大数据平台的基础上,采用了hadoop等热门的开源大数据计算引擎,打造了一款为京东运营和产品提供决策性的数据类产品-北斗平台。 一、Hadoop的应用业务分析 大数据是不能用传统的计算技术处理的大型数据集的集合。它不是一个单一的技术或工具,而是涉及 ...
分类:其他好文   时间:2019-04-23 15:43:25    阅读次数:177
两款高性能并行计算引擎Storm和Spark比較
对Spark、Storm以及Spark Streaming引擎的简明扼要、深入浅出的比較。原文发表于踏得网。Spark基于这种理念,当数据庞大时,把计算过程传递给数据要比把数据传递给计算过程要更富效率。每一个节点存储(或缓存)它的数据集。然后任务被提交给节点。所以这是把过程传递给数据。这和Hadoo ...
分类:其他好文   时间:2019-03-28 09:36:20    阅读次数:149
Flink RichSourceFunction应用,读关系型数据(mysql)数据写入关系型数据库(mysql)
1. 写在前面 Flink被誉为第四代大数据计算引擎组件,即可以用作基于离线分布式计算,也可以应用于实时计算。Flink的核心是转化为流进行计算。Flink三个核心:Source,Transformation,Sink。其中Source即为Flink计算的数据源,Transformation即为进行 ...
分类:数据库   时间:2019-03-20 21:02:59    阅读次数:434
spark记录(9)SparkCore的调优之Spark内存模型
摘抄自:https://www.cnblogs.com/qingyunzong/p/8946637.html 一、概述 Spark 作为一个基于内存的分布式计算引擎,其内存管理模块在整个系统中扮演着非常重要的角色。理解 Spark 内存管理的基本原理,有助于更好地开发 Spark 应用程序和进行性能 ...
分类:其他好文   时间:2019-03-03 16:06:42    阅读次数:159
SLAM+语音机器人DIY系列:(七)语音交互与自然语言处理——3.自然语言处理云计算引擎
摘要 这一章将进入机器人语音交互的学习,让机器人能跟人进行语音对话交流。这是一件很酷的事情,本章将涉及到语音识别、语音合成、自然语言处理方面的知识。本章内容: 1.语音交互相关技术 2.机器人语音交互实现 3.自然语言处理云计算引擎 3.自然语言处理云计算引擎 这一节的内容作为展望内容,供大家参考和 ...
分类:编程语言   时间:2019-02-23 01:33:49    阅读次数:207
SLAM+语音机器人DIY系列:(七)语音交互与自然语言处理——2.机器人语音交互实现
摘要 这一章将进入机器人语音交互的学习,让机器人能跟人进行语音对话交流。这是一件很酷的事情,本章将涉及到语音识别、语音合成、自然语言处理方面的知识。本章内容: 1.语音交互相关技术 2.机器人语音交互实现 3.自然语言处理云计算引擎 2.机器人语音交互实现 其实要自己做一款语音对话机器人还是很容易的 ...
分类:编程语言   时间:2019-02-22 23:42:59    阅读次数:371
spark记录(0)Spark初始
部分摘自:https://www.cnblogs.com/qingyunzong/p/8886338.html 1.什么是Spark Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开 ...
分类:其他好文   时间:2019-02-22 23:19:24    阅读次数:187
142条   上一页 1 ... 3 4 5 6 7 ... 15 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!