码迷,mamicode.com
首页 > 2019年02月21日 > 全部分享
大数据技术之_05_Hadoop学习_04_MapReduce_Hadoop企业优化(重中之重)+HDFS小文件优化方法+MapReduce扩展案例+倒排索引案例(多job串联)+TopN案例+找博客共同粉丝案例+常见错误及解决方案
第6章 Hadoop企业优化(重中之重)6.1 MapReduce 跑的慢的原因6.2 MapReduce优化方法6.2.1 数据输入6.2.2 Map阶段6.2.3 Reduce阶段6.2.4 I/O传输6.2.5 数据倾斜问题6.2.6 常用的调优参数6.3 HDFS小文件优化方法6.3.1 H ...
分类:其他好文   时间:2019-02-21 00:11:15    阅读次数:172
HTTP协议简单认识
一.HTTP协议简介 HTTP超文本传输协议是一种用于分布式,协作式和超媒体信息系统的应用层协议 二.HTTP协议概述 HTTP是一个客户端和服务端请求和响应的标准 三.HTTP协议工作步骤 1.客户端连接到web服务器 2.发送HTTP请求 3.服务器接收请求并返回HTTP响应 web服务器解析请 ...
分类:Web程序   时间:2019-02-21 00:11:01    阅读次数:211
循环 loop
今天学习了loop,包括for计数循环和while条件循环 以下是学习代码 打印了9*9乘法口诀表 # -*- coding: utf-8 -*-"""Created on Wed Feb 20 16:09:46 2019 结果如图: 没有截完整。学习到了for循环的range函数的用法,包括反向计 ...
分类:其他好文   时间:2019-02-21 00:10:48    阅读次数:167
8:使用GTID进行复制
MySQL中基于GTID的复制
分类:其他好文   时间:2019-02-21 00:10:31    阅读次数:206
python(logging,hashlib与模块导入)
logging模块 显示(同时等级:用户名:提示信息) logger对象 ...
分类:编程语言   时间:2019-02-21 00:10:04    阅读次数:176
#Leetcode# 258. Add Digits
https://leetcode.com/problems/add-digits/ Given a non-negative integer num, repeatedly add all its digits until the result has only one digit. Example ...
分类:其他好文   时间:2019-02-21 00:09:33    阅读次数:139
js和jquery的区别
js和jquery的区别1.入口函数不同 js:window.onload = function(){内部放js} 实质就是一个事件,拥有事件的三要素,事件源,事件,事件处理程序。等到所有内容,以及我们的外部图片之类的文件加载完了之后,才会去执行。只能写一个入口函数。 jQuery:$(functi ...
分类:Web程序   时间:2019-02-21 00:09:19    阅读次数:223
MyBatis模糊查询异常: '%${}''读取jdbc属性
'%${}''不能传参,总是固定为root, 后来发现${username}是读取了jdbc里面的属性username,于是将jdbc属性名修改于是成功 ...
分类:数据库   时间:2019-02-21 00:08:49    阅读次数:128
RDD
1、RDD是Spark提供的核心抽象,全称为Resillient Distributed Dataset,即弹性分布式数据集。 2、RDD在抽象上来说是一种元素集合,包含了数据。它是被分区的,分为多个分区,每个分区分布在集群中的不同节点上,从而让RDD中的数据可以被并行操作。(分布式数据集) 3、R ...
分类:其他好文   时间:2019-02-21 00:08:31    阅读次数:194
HDU1257 拦截导弹系统
这题的题意不是简单的递减序列破坏了 就ans++ 一个例子: 20 15 10 16 14 5 6 4 3 2 1 如果是错误的思路,那么序列可以拆成: 20 15 10 16 14 5 6 4 3 2 1 但是其实,第一条序列的最小拦截高度是:10,大于第三条序列的最大高度:6 所以这个系统可以连 ...
分类:其他好文   时间:2019-02-21 00:08:16    阅读次数:215
力扣(LeetCode)验证回文串 个人题解
给定一个字符串,验证它是否是回文串,只考虑字母和数字字符,可以忽略字母的大小写。 说明:本题中,我们将空字符串定义为有效的回文串。 示例 1: 示例 2: 这题是验证回文串的一个变种,因为里面有干扰的字符串存在,不能直接判断,不过也很好解决,直接添加过滤的语句,遇到不是数字且不是字母的直接跳过,只有 ...
分类:其他好文   时间:2019-02-21 00:07:59    阅读次数:386
centos7 网络配置
网络配置查看网卡信息:ifconfig如果centos7最小化安装没有ifconfig这个命令:yuminstallnet-toolscentos7网卡命名规则:en:ethernet以太网卡o:主板集成网卡p:PCI独立网卡s:热插拔网卡nnn数字:MAC+主板信息(生产唯一序号)如:ifcfg-ens33(以太热插拔)ifconfigUP:网卡开启状态RUNNING:网线连接状态MULTICA
分类:其他好文   时间:2019-02-21 00:07:39    阅读次数:1152
编程语言的种类
机器语言 -一种二进制语言,直接使用二进制代码表达指令 -计算机硬件(CPU)可以直接执行,与具体CPU型号有关 -完成2+3功能的机器语言[11000010+000100011] 汇编语言 -一种二进制代码直接对应助记符的编程语言 -汇编语言与CPU型号有关,程序不通用,需要汇编器转换 -完成2+ ...
分类:编程语言   时间:2019-02-21 00:07:12    阅读次数:178
python之web自动化测试框架
梳理下搭建web自动化框架的流程: 创建目录: cases:存放测试用例,unittest框架要求用例名必须以test开头,所以命名test_case.py test_case.py代码如下:继承unittest.TestCase类下面的方法setupclass(),teardownclass()。 ...
分类:编程语言   时间:2019-02-21 00:06:53    阅读次数:252
[WSL]Windows10 Ubuntu子系统编译安装线程安全版LAMP
最近需要进行Linux下的PHP开发,之前一直都是用Docker的,但是现在发现WSL更好用 不得不说,微软就是牛逼,在Win NT内核里挂在Linux内核,不是虚拟机,没看错,不是虚拟机 不多说啦,直接开工 第一步 首先当然是安装Linux子系统支持,然后去Microsoft Store安装Ubu ...
分类:编程语言   时间:2019-02-21 00:06:37    阅读次数:423
The Morning after Halloween uva1601
这题可以用普通bfs来做 也可以用双向bfs来做(先欠着) 有点类似专题训练的一题 不过那题是找钥匙开门 不过都用了状态压缩 题意: n,m(<=16) 的网络上有t(<=3)小写字母 并且网络上有其大写字母 要求最少的步使得所有小写字母到大写字母里面去 每步可以多个小写字母同时移动(上下左右加不动 ...
分类:其他好文   时间:2019-02-21 00:06:16    阅读次数:244
Java——接口
前言 在Java中, 接口和抽象类为我们提供了一种将类的对外接口与实现分离的更加结构化的方法 。下面将介绍抽象类,它是普通的类与接口之间的一种中庸之道。然后再介绍接口。 抽象类和抽象方法 当我们仅是希望有 一个基类可以提供统一的接口去控制它导出的所有子类,并且该基类没有被实例化的必要 时,我们就可以 ...
分类:编程语言   时间:2019-02-21 00:05:46    阅读次数:172
763条   上一页 1 ... 41 42 43 44 45 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!