码迷,mamicode.com
首页 >  
搜索关键字:hadoop mapreduce job eclipse    ( 44113个结果
eclipse中的Quick Type Hierarchy快速类型层次结构
For example, if an interface is selected when you invoke the Quick Type Hierarchy, the list displays all the known classes that implement the interfac ...
分类:系统相关   时间:2021-06-30 17:33:09    阅读次数:0
Hadoop复习第五章MapReduce
1.会编程,参考实验 1.1编程实现词频统计基本操作 主函数 public static void main(String[] args) throws Exception{ Configuration conf = new Configuration(); //程序运行时参数 String[] o ...
分类:其他好文   时间:2021-06-29 16:02:29    阅读次数:0
Hadoop复习-常用的HDFS操作
1、列出子目录或子文件 hdfs dfs -ls +路径 2、创建目录(-p表示父目录都会创建) hdfs dfs -mkdir -p /001/mydemo/x/y/z hdfs dfs -mkdir /001/mydemo3 /001/mydemo4 /001/mydemo5 3、列出文件夹中的 ...
分类:其他好文   时间:2021-06-28 21:04:34    阅读次数:0
Hadoop期末复习(第二章)
第二章.HDFS 1.大数据的两个核心技术 2.HDFS设计目标 3.HDFS自身的局限性 4.HDFS采用块设计以及采用块设计的好处 5.HDFS组成架构 6.元数据信息被持久化到磁盘分为哪两个文件 7.第二名称节点的作用 8.名称节点,数据节点的功能 待补充 9.副本机制、数据容错机制、心跳机制 ...
分类:其他好文   时间:2021-06-28 20:29:20    阅读次数:0
单元测试
产品名称: 房屋租赁系统 产品部门: 版本号 :v1.0 语 种: java 开发工具:eclipse 测试工具: junit+EclEmma 测试人员: 刘志霄 测试时间: 测试要求: 对房屋租赁系统完成单元测试,完善测试用例,完善逻辑覆盖 测试内容: 系统使用用户列表增删改查测试 租客列表增删改 ...
分类:其他好文   时间:2021-06-28 20:08:02    阅读次数:0
RobotFramework + Python 自动化入门 七 (脚本执行+init+teardown+关键字)
在《RobotFramwork + Python 自动化入门 一》中,完成了一个Robot环境搭建及测试脚本的创建和执行。 在《RobotFramwork + Python 自动化入门 二》中,对RobotFramework的关键字使用和查看源码进行了介绍。 在《RobotFramwork + Py ...
分类:编程语言   时间:2021-06-28 19:02:49    阅读次数:0
并发编程-ThreadLocal&ForkJoinPool(使用以及原理分析)
并发编程-ThreadLocal&ForkJoinPool(使用以及原理分析) 本章只要聊聊两个东西,这里会给出如何使用他们,并且分析各自的源码以及原理。 【ThreadLocal】:在指定线程中存储数据,数据存储后只有指定线程可以获得 【ForkJoinpool】:实际上他类似于【hadoop】他 ...
分类:其他好文   时间:2021-06-28 18:58:16    阅读次数:0
Hadoop期末考复习第一章-概论
一、大数据的基本特征(4V,存储单位) 二、大数据对思维方式的影响 三、Google 三辆马车是什么? Google的文件系统GFS(Google File System)、分布式计算框架MapReduce、Bigtable 四、Hadoop 是什么,基本特征 基本特征: 五、Hadoop 生态系统 ...
分类:其他好文   时间:2021-06-28 18:27:13    阅读次数:0
Hadoop入门 集群时间同步
集群时间同步 **如果服务器在公网环境(能连接外网),可以不采用集群时间同步。**因为服务器会定期和公网时间进行校准。 如果服务器在内网环境,必须要配置集群时间同步,否则时间久了,会产生时间偏差,导致集群执行任务时间不同步。 时间服务器配置(必须root用户) 首先需要设置一个时间服务器作为基准,其 ...
分类:其他好文   时间:2021-06-28 17:56:59    阅读次数:0
Azkaban 简介(一)
什么是任务调度 大数据平台技术框架支持的开发语言多种多样,开发人员的背景差异也很大,这就产生出很多不同类型的程序(任务)运行在大数据平台之上,如:MapReduce、Hive、Pig、Spark、Java、Shell、Python 等。 这些任务需要不同的运行环境,并且除了定时运行,各种类型之间的任 ...
分类:其他好文   时间:2021-06-23 17:16:53    阅读次数:0
44113条   上一页 1 2 3 4 ... 4412 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!