什么是任务调度 大数据平台技术框架支持的开发语言多种多样,开发人员的背景差异也很大,这就产生出很多不同类型的程序(任务)运行在大数据平台之上,如:MapReduce、Hive、Pig、Spark、Java、Shell、Python 等。 这些任务需要不同的运行环境,并且除了定时运行,各种类型之间的任 ...
分类:
其他好文 时间:
2021-06-23 17:16:53
阅读次数:
0
PreparedStatement针对不同表的通用查询操作 public class PreparedStatementQueryTest { @Test public void testGetForList(){ String sql="select id,name,email from cust ...
分类:
其他好文 时间:
2021-06-23 17:15:36
阅读次数:
0
Pycharm退出pytest模式(run pytest in模式) 一、首先,我们来看一下pycharm进入test模式与run模式的区别: run模式: test模式: 很明显的问题,运行模式不同的情况下,对于测试执行结果的显示有很大的不同。 当我们使用pytest框架编写自动化测试脚本并且对其 ...
分类:
其他好文 时间:
2021-06-23 17:15:08
阅读次数:
0
1|简单工厂模式定义 简单工厂模式(Simple Factory Pattern):定义一个工厂类,它可以根据参数的不同返回不同类的实例,被创建的实例通常都具有共同的父类; 由于在简单工厂模式中用于创建实例的方法通常是静态(static)方法,因此简单工厂模式又被称为 静态工厂方法模式(Static ...
分类:
其他好文 时间:
2021-06-23 16:46:38
阅读次数:
0
https://leetcode-cn.com/problems/kth-largest-element-in-an-array/ 215. 数组中的第K个最大元素 在未排序的数组中找到第 k 个最大的元素。请注意,你需要找的是数组排序后的第 k 个最大的元素,而不是第 k 个不同的元素。 示例 1 ...
分类:
编程语言 时间:
2021-06-23 16:38:41
阅读次数:
0
为什么要分库分表? 将承受并发的能力提升3倍 将大数据了拆成多份 提升sql效率 用过哪些分库分表中间件/不同中间件的优缺点 cobar TDDL 只支持基本的crud操作 atlas 社区不咋维护了 sharding-jdbc(集成client) 运维成本低 缺点是耦合系统版本 mycat(pro ...
分类:
数据库 时间:
2021-06-23 16:37:48
阅读次数:
0
1、跨域: 出于浏览器的同源策略限制,同源策略会阻止一个域的javascript脚本和另外一个域的内容进行交互。 同源:即指在同一个域中,就是两个页面具有相同的协议(protocol),主机(host)和端口号(port)一样。 非同源:协议、主机、端口号任有一项不同。 跨域:当一个请求url的协议 ...
分类:
Web程序 时间:
2021-06-23 16:30:42
阅读次数:
0
服务器硬件及RAID配置实战一.RAID磁盘阵列概述① 是Redundant Array of Independent Disks的缩写,中文简称为独立冗余磁盘阵列② 把多块独立的物理硬盘按不同的方式组合起来形成一个硬盘组(逻辑硬盘)从而提供比单个硬盘更高的存储性能和提供数据备份技术③ 组成磁盘阵列 ...
分类:
系统相关 时间:
2021-06-23 16:30:18
阅读次数:
0
传统数据架构建设思路 — “建治用” 传统的数据架构建设模式并不注重与业务部门具体情况的结合,只是单纯地遵循数据“建治用”的思路 — 先构建数据架构,然后对数据进行治理,最后考虑数据的具体应用。比如,企业会从 IaaS(基础设施即服务)层到不同的 PaaS(平台即服务)层,到 DaaS(数据即服务) ...
分类:
其他好文 时间:
2021-06-23 16:30:01
阅读次数:
0
第 10 章 RDB 持久化 数据库状态:服务器中的非空数据库以及它们的键值对统称为数据库状态 Redis 提供 RDB 持久化功能,将内存中的数据库状态保存到磁盘中,避免数据意外丢失 RDB 文件是一个经过压缩的二进制文件,还可以通过该文件还原生成 RDB 文件时的数据库状态 10.1 RDB 文 ...
分类:
数据库 时间:
2021-06-23 16:26:57
阅读次数:
0