码迷,mamicode.com
首页 >  
搜索关键字:spark shell    ( 34921个结果
第一个Vue页面
一、安装nodehttps://nodejs.org/en/直接选择LTS长期支持版下载对应系统安装文件进行安装。安装完后,打开cmd命令行界面node-v查看对应安装版本,例:v12.18.3安装淘宝cnpmsudonpminstallcnpm-g--registry=https://registry.npm.taobao.org安装yarn(fackbook依赖管理工具与Npm功能一样,推荐使
分类:其他好文   时间:2020-07-29 18:01:10    阅读次数:102
自动化shell脚本except与python的pexpect模块
expect脚本expect是什么expect是一个免费的编程工具,用来实现自动的交互式任务,而无需人为干预。说白了,expect就是一套用来实现自动交互功能的软件。在实际工作中,我们运行命令、脚本或程序时,这些命令、脚本或程序都需要从终端输入某些继续运行的指令,而这些输入都需要人为的手工进行。而利用expect,则可以根据程序的提示,模拟标准输入提供给程序,从而实现自动化交互执行由于在linux
分类:编程语言   时间:2020-07-29 15:04:04    阅读次数:77
Python3使用plotly模块保存图片与shell下生成表格
使用plotly模块保存图片 目的 使用Python3的Plotly模块,实现对数据库数据的读取,然后形成Table表格,并通过钉钉机器人定时发送到钉钉群组。 难点 Plotly本身是通过html页面展示的,先要把图片保存下来需要安装一些其他的包;通过网上的无数文章都是错误的,弄了将近两天才把环境搞 ...
分类:编程语言   时间:2020-07-29 14:51:39    阅读次数:87
部署docker-registry+ui shell 域名证书-用户认证
#部署docker-registry+ui shell docker registry 配置域名证书, 用户密码认证, 轻量UI ansible部署docker-registry+ui https://www.cnblogs.com/elvi/p/13394492.html #!/bin/bash ...
分类:系统相关   时间:2020-07-29 10:01:43    阅读次数:79
部署docker-registry +ui , 使用ansible部署docker实例
#部署docker-registry +ui , 使用ansible部署docker实例 docker registry 配置域名证书, 用户密码认证, 轻量UI shell部署docker-registry+ui https://www.cnblogs.com/elvi/p/13394449.ht ...
分类:其他好文   时间:2020-07-29 10:00:57    阅读次数:68
Spark 数据处理相关代码
<dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> <version>2.3.3</version> </dependency> <!-- https://mvnrepos ...
分类:其他好文   时间:2020-07-29 09:53:42    阅读次数:61
Samba的搭建实录
Samba的配置 samba是通过smb协议使得windows和unix之间能够文件共享的软件 首先要获得本机的ip地址 ifconfig //查看本机IP,连接时需要。 su //先获取root权限 useradd samba //设置samba用户 passwd samba //设置samba密 ...
分类:其他好文   时间:2020-07-29 00:43:57    阅读次数:79
《hadoop 集群搭建、spark安装、Hbase安装、Hive安装、Kafka安装》
1 hadoop集群安装 https://blog.csdn.net/shshheyi/article/details/84893371 1.1 修改主机名 [root@localhost ~]# vim /etc/hosts # 三台机器都需要操作 192.168.28.131 master 19 ...
分类:其他好文   时间:2020-07-29 00:41:18    阅读次数:111
spark系列之基本概念
Spark的架构图 1、RDD(弹性分布式数据集) RDD是对象的分布式集合。 RDD以并行方式应用和记录数据转换 RDD也提供数据沿袭——以图形形式给出每个中间步骤的祖先树,当RDD的一个分区丢失,可以根据祖先树重建该分区。 RDD有两组操作,转换(transformation)和行动(actio ...
分类:其他好文   时间:2020-07-28 22:37:30    阅读次数:72
Linux ldd and nm
ldd和nm是Linux下两个非常实用的程序分析工具。其中,ldd是用来分析程序运行时需要依赖的动态链接库的工具,nm是用来查看指定程序中的符号表信息的工具。 1 ldd 格式:ldd [options] file 功能:列出file运行所需的共享库 参数: -d 执行重定位并报告所有丢失的函数 - ...
分类:系统相关   时间:2020-07-28 22:32:42    阅读次数:87
34921条   上一页 1 ... 75 76 77 78 79 ... 3493 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!