启动Spark任务时，在没有配置spark.yarn.archive或者spark.yarn.jars时， 会看到不停地上传jar非常耗时；使用spark.yarn.archive可以大大地减少任务的启动时间，整个处理过程如下 1.在本地创建zip文件 2.上传至HDFS并更改权限 3.配置spar ...
分类：
编程语言 时间：
2018-11-29 23:15:03
阅读次数：
1439
一个简单的任务调度 首先要写一个脚本world.sh 目的是为了验证 #！、bin/bash echo "hello world' >> tt.txt wq 退出保存 然后更改权限 chomd 755 world.sh 智游更改权限 sh才能变成可执行脚本 然后安装crontab服务 linux应该 ...
分类：
系统相关 时间：
2018-11-24 14:34:32
阅读次数：
610
在xshell中，点击上方的“工具”，选择“新建用户密钥生成向导”公钥生成后，点击“下一步”设置密钥名称及密钥密码下一步复制并保存公钥复制公钥为之后做准备。点击“完成”在服务器中配置密钥登陆的配置mkdir/root/.ssh（创建目录）chmod700/root/.ssh（更改权限）vi/root/.ssh/authorized_keysauthorized_keys文件现在是不存在的，一定要书
分类：
系统相关 时间：
2018-11-22 20:39:38
阅读次数：
230
首先在安装中使用的https://www.sysgeek.cn/install-mysql-8-in-ubuntu-18-04/中的安装步骤，过程都没问题，也能本地连上，但是到远程连接的时候出现问题，弄了一早上。 最终解决方法是用的大佬的，但是在过程中发现root权限很多都没有，需要先更改权限； U ...
分类：
数据库 时间：
2018-10-12 16:11:23
阅读次数：
151
解决办法：给host文件赋予权限 1、打开电脑C盘，在目录C:\Windows\System32\drivers\etc 下找到hosts文件 2.右键hosts文件，选择属性 3.点击hosts属性对话框里的“高级”，如下图所示。 4.在hosts的高级安全设置界面点击更改权限，如下图所示。 5. ...
分类：
其他好文 时间：
2018-10-02 20:23:01
阅读次数：
215
Linux文件权限管理 基本权限 UGO 文件权限设置： 可以赋于某个用户或组 能够以何种方式 访问某个文件 设置权限 1. 更改文件的属主、属组 2. 更改权限 设置权限示例 针对hr部门的访问目录设置权限，要求如下：1. root用户和hr组的员工可以读、写、执行2. 其他用户没有任何权限 重要 ...
分类：
系统相关 时间：
2018-08-27 14:03:45
阅读次数：
224
更改权限使用grantallprivilegeson来更改用户对应某些库的远程权限语法模板grantallprivilegeson库名.表名to‘用户名‘@‘IP地址‘identifiedby‘密码‘withgrantoption;flushprivileges;注：库名:要远程访问的数据库名称,所有的数据库使用“”表名:要远程访问的数据库下的表的名
分类：
数据库 时间：
2018-07-16 17:19:36
阅读次数：
166
