码迷,mamicode.com
首页 >  
搜索关键字:mapreduce 实战    ( 20951个结果
OpenStack新增加一个计算节点
一、增加计算节点需要步骤 1:配置yum源 2:时间同步 3:安装openstack基础包 4:安装nova-compute 5:安装neutron-linuxbridge-agent 6:启动服务nova-compute和linuxbridge-agent 7:验证 二、增加计算节点实战 1. 配 ...
分类:其他好文   时间:2020-11-25 12:44:41    阅读次数:4
我要进大厂之大数据MapReduce知识点(2)
01 我们一起学大数据 今天老刘分享的是MapReduce知识点的第二部分,在第一部分中基本把MapReduce的工作流程讲述清楚了,现在就是对MapReduce零零散散的知识点进行总结,这次的内容大纲如下图: 02 需要谨记的知识点 第6点:自定义分区 在上篇文章里的第五点提到过这句话:分区用到了 ...
分类:其他好文   时间:2020-11-25 12:39:39    阅读次数:6
集成华为Image Kit美化功能 为你的图片增添新元素
前言我们在生活中美化图片的方法很多,贴纸花字是其中一种美化功能。ImageKit的贴纸花字可任意添加、拖动、缩放,且可以自定义花字的文本内容,为你的图片增添新活力。应用场景贴纸花字大多数可用于修图软件里,你可选择与图片风格相搭配的贴纸花字,且类型丰富多样。开发实战下面给大家介绍怎么集成Imagekit的贴纸花字能力:开发准备贴纸花字服务的所有接口的实现都是基于StickerLayout,是一个自定
分类:其他好文   时间:2020-11-25 12:14:54    阅读次数:3
Python爬虫实现翻译功能
##前言 学了这么久的python理论知识,需要开始实战来练手巩固了。 ##准备 首先安装爬虫urllib库 pip install urllib 获取有道翻译的链接url 需要发送的参数在form data里 ##示例 import urllib.request import urllib.par ...
分类:编程语言   时间:2020-11-24 12:19:27    阅读次数:8
认识Hive
认识Hive 从MapReduce到SQL Hive架构 三种安装方式 Hive与关系型数据库的区别 1. 认识Hive 前面我们讲到了mapreduce计算框架,各位需要通过java编码的形式来实现设计运算过程,Hive的设计目的就是为了让精通sql技能而java较弱的分析师能够利用hadoop进 ...
分类:其他好文   时间:2020-11-21 12:33:40    阅读次数:7
MapReduce
2. MAPREDUCE框架结构及核心运行机制 2.1 框架架构 一个完整的mapreduce程序在分布式运行时有三类实例进程:1、MRAppMaster(Mapreduce application master):负责整个程序的过程调度及状态协调2、MapTask:负责map阶段的整个数据处理流程 ...
分类:其他好文   时间:2020-11-21 12:15:54    阅读次数:6
大数据平台建设 —— SQL查询引擎之Presto
大数据查询引擎Presto简介SQLonHadoop:Hive的出现让技术人员可以通过类SQL的方式对批量数据进行查询,而不用开发MapReduce程序MapReduce计算过程中大量的中间结果磁盘落地使运行效率较低为了提高SQLonHadoop的效率,各大工具应运而生,比如Shark、Impala等SQLonHadoop的常见工具:Presto是什么:Presto是由Facebook开发的分布式
分类:数据库   时间:2020-11-21 12:01:11    阅读次数:8
微博Service Mesh高可用架构实战.
ServiceMesh是近两年比较火的微服务化新方式,也产生了一大批以Istio为代表的ServiceMesh实现。image.png微博基于实际业务需求,打造并开源了自己的WeiboMesh,并且内部已经在重点业务上进行大规模落地。本文将从如下几个部分为大家详细解读WeiboMesh,希望可以为大家带来服务化方向上的一些灵感,更好的服务于自己的业务:微博服务化挑战服务化新思路WeiboMesh方
分类:其他好文   时间:2020-11-20 12:10:29    阅读次数:9
深入探讨HBASE
HBase是一个高可靠、高性能、面向列的,主要用于海量结构化和半结构化数据存储的分布式key-value存储系统。它基于Google Bigtable开源实现,但二者有明显的区别:Google Bigtable基于GFS存储,通过MAPREDUCE处理存储的数据,通过chubby处理协同服务;而HB... ...
分类:其他好文   时间:2020-11-20 12:05:39    阅读次数:11
封神台靶场:第五章:进击!拿到Web最高权限!【配套课时:绕过防护上传木马实战演练】
提示: 1,通过修改Cookie登录后台(没用重打)2,上传SHELL!3,Flag在Web根目录(flag.php)3.上传图片时建议上传小文件,我建议用QQ表情 尤里通过XSS终于得到了管理员Cookie,在修改了cookie后尤里直接绕过了登录密码,看到了后台功能!然后要做的,就是找一个上传点 ...
分类:Web程序   时间:2020-11-20 11:56:19    阅读次数:14
20951条   上一页 1 ... 29 30 31 32 33 ... 2096 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!