key 分布不均匀 业务数据本身的欠缺性 建表设计方法不对 有些 SQL 难免会有一下数据倾斜不可避免 表现的形式： 任务完成进度卡死在99%，或者进度完成度在100%但是查看任务监控，发现还是有少量（1个或几个）reduce 子任务未完成。因为其处理的数据量和其他 reduce 差异过大。单一re ...
分类：
其他好文 时间：
2021-06-18 19:56:57
阅读次数：
0
一、Flink内核解析，针对版本1.12.0，四大块：任务的提交流程，组件通信，任务的调度，内存管理。 任务的提交流程：以命令行的提交命令开始追踪类，20多个步骤，几十个类，数千行代码量，最后画一个PPT动图 组件通信：actor的模型，akka基本原理和实现,5大关键角色：代理转发，处理细节，PP ...
分类：
其他好文 时间：
2021-06-18 19:53:27
阅读次数：
0
1 #函数应用：计算两个正数的最大公约数和最小公倍数 2 def function1(n1,n2): 3 if n1 > n2: 4 n1 , n2 = n2 , n1 5 for i in range(n1,0,-1): 6 if n1 % i == 0 and n2 % i == 0: 7 re ...
分类：
编程语言 时间：
2021-06-18 19:22:14
阅读次数：
0
添加依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId> </dependency> 添加yml配置 spring: re ...
分类：
编程语言 时间：
2021-06-18 19:19:32
阅读次数：
0
引入计数 在Python中，每个对象都有指向该对象的引用总数 引用计数 查看对象的引用计数：sys.getrefcount() import sys alist=['a','b','c'] >>> sys.getrefcount(alist) 2 >>> b=alist >>> sys.getref ...
分类：
编程语言 时间：
2021-06-18 19:16:12
阅读次数：
0
在指定目录下，模糊匹配搜寻目标文件，并得出目标文件的完整路径； 采用match完全匹配； #!/usr/bin/env python # -*- coding: utf-8 -*- import os import sys import ctypes import re if __name__==" ...
分类：
编程语言 时间：
2021-06-18 19:10:00
阅读次数：
0
Java 中的内存分配 Java 程序运行时，需要在内存中分配空间。为了提高运算效率，就对空间进行了不同区域的划分，因为每一片区域都有特定的处理数据方式和内存管理方式。 一、栈：储存局部变量 局部变量：在方法的定义中或者在方法声明上的变量称为局部变量。 特点：栈内存的数据用完就释放。 二、堆：储存 ...
分类：
编程语言 时间：
2021-06-15 18:19:03
阅读次数：
0
正则表达式中，group（）用来提出分组截获的字符串，（）用来分组 例如： 1 import re 2 a = "123abc456" 3 print re.search( "([0-9]*)([a-z]*)([0-9]*)" ,a).group( 0 ) #123abc456,返回整体 4 pri ...
分类：
编程语言 时间：
2021-06-15 17:51:42
阅读次数：
0
Linux内核简介 第一章主要对Linux的内核进行一个大致的介绍，让大家对Linux的内核有一个比较全面的印象。众所周知Linux起源于unix系统，它们之间有着千丝万缕的联系，伟大的linux之父linus不满于当时unix对于源码更改的限制，花费一学年的时间写出了内核雏形，并在91年年底在互联 ...
分类：
系统相关 时间：
2021-06-15 17:42:16
阅读次数：
0
###TP5.1 下载安装Redis 配置redis信息 <?php namespace app\common\redis; class RedisHandler { public $provider; //创建实例子 private static $_instance = null; //创建re ...
分类：
其他好文 时间：
2021-06-13 10:19:59
阅读次数：
0
