大数据查询引擎Presto简介SQLonHadoop：Hive的出现让技术人员可以通过类SQL的方式对批量数据进行查询，而不用开发MapReduce程序MapReduce计算过程中大量的中间结果磁盘落地使运行效率较低为了提高SQLonHadoop的效率，各大工具应运而生，比如Shark、Impala等SQLonHadoop的常见工具：Presto是什么：Presto是由Facebook开发的分布式
分类：
数据库 时间：
2020-11-21 12:01:11
阅读次数：
8
从学习网站上面下载的很多视频好多都是有后缀的，强迫症看起来很难受，一个一个修改名字又不现实，以此脚本来解决，可以简单实现将文件名批量删除一个特定的字符，还可以将文件夹里面所有子文件夹的文件修改，（ps:我是小白，大佬勿喷） 例如 想要删除“程序员教程吧论坛。。。” 核心代码块： 所有代码： impo ...
分类：
编程语言 时间：
2020-11-20 12:05:19
阅读次数：
9
今天在处理数据时，有份excel格式的文件出现了大量的空白行，逐行删除非常之麻烦，所以去了解了批量删除的方法。 Excel定位功能 两种定位的方法如下： F5 Ctrl+G 删除空白行 首先Ctrl+A全选。（可以看出来我这份文档是一行数据一行空白格） 接下来用定位功能，定位条件选择空值。所有的空行 ...
分类：
其他好文 时间：
2020-11-19 12:06:03
阅读次数：
5
Ansible一种集成IT系统的配置管理、应用部署、执行特定任务的开源平台/框架。基于Python语言实现，核心模块包括：jinja2、PyYAML和paramiko。Ansible允许重复执行而不出错，客户端无agent，服务端无deamon进程。Ansible特点：Ansible支持API接口调用，例如通过CMDB调用或公有云接口调用Ansible是一个框架，基于模块、插件工作基于SSH工作，
分类：
其他好文 时间：
2020-11-18 12:52:01
阅读次数：
6
一、安装jdk （这里安装openjdk） 1）、CentOS8上使用 yum 直接安装，环境变量自动配置好 2）、查看是否已安装 3）、查看卸载 查看系统是否自带 jdk 如果有输出信息，批量卸载系统自带 rpm -qa | grep java | xargs rpm -e --nodeps 如果 ...
分类：
其他好文 时间：
2020-11-17 12:54:54
阅读次数：
11
行数据批量delete时，InnoDB如何处理自增ID，是一个潜在的大坑。整个实验步骤如上图：第一步：建表，设定自增列；第二步：指定id=1插入，锚定第一行是id是1；第三步：不指定id，依赖自增机制，插入3行；画外音：此时id应该变为2，3，4了？第四步：delete删除所有记录；画外音：坑就容易出在这里。第五步：指定id=0插入；第六步：指定id=1插入；第七步：不指定id，依赖自增机制，插入
分类：
其他好文 时间：
2020-11-16 13:11:46
阅读次数：
4
/ ||文件名：数据库审计事件记录脚本 ||说明：为了对数据库事件进行审计，而进行相关设计 / /* 审计记录表 */ /* 系统会话事件审计表 / CREATE TABLE SYSTEM.Audit_Login_DB( / ||名称：审计数据库会话登陆事件记录表 ||说明： / Session_I ...
分类：
数据库 时间：
2020-11-16 12:59:21
阅读次数：
9
如果说虚拟机是买公寓，容器则相当于合租，有一定的隔离，但是隔离性没有那么好。云计算解决了基础资源层的弹性伸缩，却没有解决 PaaS 层应用随基础资源层弹性伸缩而带来的批量、快速部署问题。于是，容器应运而生。 容器就是 Container，而 Container 的另一个意思是集装箱。其实容器的思想就 ...
分类：
其他好文 时间：
2020-11-13 12:54:30
阅读次数：
6
#!/binbash rpm -qa |grep expect > /dev/null #判断是否已下载expect 若没有则下载该服务 a=`echo $?` [ ! $a -eq 0 ] && yum -y install expectif [ ! -e /root/.ssh/id_rsa.pu ...
分类：
其他好文 时间：
2020-11-13 12:52:19
阅读次数：
9
openpyxl 介绍 openpyxl 是一个直接可用于读写 xlsx 、xlsm、xltx、xltm 文件的 Python 内置库，借助它可以利用 Python 语法对本地 xlsx 文件进行自动化批量操作 先说一下安装部分，如果小伙伴们用 Anaconda 作为 Python 环境的话，ope ...
分类：
编程语言 时间：
2020-11-11 16:25:14
阅读次数：
10
