码迷,mamicode.com
首页 >  
搜索关键字:tez mrr mr    ( 1467个结果
方法的重载和命令行给main方法添加参数
// 命令行java命令执行的时候这里会报错的,所以需要去com的上一级的目录去java com.mixi.wc.Demo 这样去执行 package com.moxi.wc; /** * @author Mr.Wang * @version 1.0 * @since 1.8 */ public c ...
分类:其他好文   时间:2021-02-16 11:56:24    阅读次数:0
excel操作
# -*- coding: utf-8 -*-# @Time : 2021/1/25 22:01# @Author : Mr.Heiimport xlsxwriterworkbook=xlsxwriter.Workbook('chart.xlsx')worksheet=workbook.add_wo ...
分类:其他好文   时间:2021-01-28 12:08:52    阅读次数:0
Hive整合Hbase
HBase 虽然可以存储数亿或数十亿行数据,但是对于数据分析来说,不太友好,只提供了简单的基于 Key 值的快速查询能力,没法进行大量的条件查询。现有hbase的查询工具有很多如:Hive,Tez,Impala,Shark/Spark,Phoenix等。今天主要说Hive,Hive方便地提供了Hiv ...
分类:其他好文   时间:2021-01-21 10:54:30    阅读次数:0
git 学习
https://www.cnblogs.com/mr-wuxiansheng/p/6974170.html ...
分类:其他好文   时间:2021-01-19 11:57:04    阅读次数:0
协方差矩阵
协方差矩阵 https://blog.csdn.net/Mr_HHH/article/details/78490576 分清数据的维度m-1还是n-1根据所选的数据维度走 上例子中按列求均值 ...
分类:其他好文   时间:2021-01-18 11:04:20    阅读次数:0
hive性能调优
1. 设置执行引擎 set hive.execution.engine=mr;set hive.execution.engine=spark; 如果设置执行引擎为MR,那么调用Hadoop的maprecude来运行需要执行的job的程序; 如果设置执行引擎为spark,那么就会调用spark来执行任 ...
分类:其他好文   时间:2021-01-15 12:15:21    阅读次数:0
Python中进程、线程、协程及其区别
以下为复制内容: https://blog.csdn.net/mr__l1u/article/details/81772073 1> 进程、线程和协程的认识: 进程是系统进行资源分配和调度的独立单位; 线程是进程的实体,是CPU调度和分派的基本单位; 协程也是线程,称微线程,自带CPU上下文,是比线 ...
分类:编程语言   时间:2020-12-29 11:03:46    阅读次数:0
大表数据过滤查询很慢
一、问题描述 查询的语句类似如下: select * from table_name where xxx='yyy' limit 10; 当前的hive表存储格式是orc格式,执行引擎是tez,并行度也已经调整到几十了,但是在执行这个sql的时候,发现一直卡住,执行不成功。 二、问题现象 and 分 ...
分类:其他好文   时间:2020-12-25 13:03:17    阅读次数:0
spark学习(一) --spark基本概念和任务调度
(一)RDD、DataFream、DataSet 理解 1. RDD理解 (1) RDD定义为弹性分布式数据集合。 MR运算之间数据共享差: MR的计算之间的数据共享只能通过将数据写入外部存储系统。后一步计算需要从外部存储系统中加载进来的方式进行。 Spark 思路相反,设计了一种抽象-RDD(弹性 ...
分类:其他好文   时间:2020-11-10 10:31:29    阅读次数:3
Reporting tool on Power Platform - PowerBI/ER/MR/SSRS
Reporting and analytics with Power BI home page This topic points you to resources that you can use to learn more about the business intelligence (BI) ...
分类:其他好文   时间:2020-11-01 09:20:29    阅读次数:20
1467条   上一页 1 2 3 4 ... 147 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!