1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() import pandas as pd import numpy as np arr = np.arange(6).reshape(-1 ...
分类：
其他好文 时间：
2021-05-24 08:54:40
阅读次数：
0
扫描以下常见未授权访问 redis、mongodb、memcached、elasticsearch、zookeeper、ftp、CouchDB、docker、Hadoop 安装 pip3 install -r requirements.txt -i https://mirrors.aliyun.co ...
分类：
其他好文 时间：
2021-05-24 08:32:18
阅读次数：
0
项目预计第一阶段花费十天的时间，第二阶段粗略估计要花一个月，因为第二阶段所需要的技术，像 Hadoop，kafka之类的之前并没有接触过，而第一阶段的工作，css、JavaScript、HTML，echarts等 在之前的学习中已有涉猎。目前已经花费十天，还剩余一个月 产品状态：目前已实现获取当前热 ...
分类：
其他好文 时间：
2021-05-24 07:14:48
阅读次数：
0
https://blog.csdn.net/linuxvfast/article/details/93720931 在Hadoop安装目录下找到sbin文件夹 在里面修改四个文件 对于start-dfs.sh和stop-dfs.sh文件，添加下列参数： #!/usr/bin/env bash HDF ...
分类：
其他好文 时间：
2021-05-24 06:40:05
阅读次数：
0
1. 相关版本 项目 版本号 windows版本 win10(19041.928) vmware版本 15.02 centos版本 CentOS-8.3.2011 2. 安装步骤 2.1 使用VMware新建虚拟机功能创建虚拟机 2.2 选择【典型（推荐）】进行创建 2.3 选择【稍后安装操作系统】 ...
1：业务背景介绍 本次为22届的实习生校招，请不符合要求的同学不要投简历过来。 本岗位为技术开发和大数据研发岗位，想做产品和运营的同学请移步其他地方投简历谢谢 业务相关的背景请参照： https://job.alibaba.com/zhaopin/position_detail.htm?spm=a2 ...
分类：
其他好文 时间：
2021-05-24 05:53:07
阅读次数：
0
2、安装3台虚拟机并实现SSH免密登录 (1）安装三台虚拟机centos7 第一台正常安装，后两台做克隆。配置好IP地址，关闭防火墙跟SELINUX。 106.14.69.185 server1 121.5.218.141 server2 （2）修改用户名以及对应的IP # vi /etc/host ...
分类：
其他好文 时间：
2021-05-24 05:35:32
阅读次数：
0
当安装虚拟机时出现： 我是因为之前安装在SD卡上，在制作系统U盘的时候手贱点错盘符给SD卡格式化了，所以再次安装就这样安装不了 解决方法绝对靠谱干净 1、点击 “此电脑 管理 磁盘管理”到下面这页 2、然后咧，随便找一个电脑硬盘，右键，更改驱动器号和路径 3、接着嘞，把磁盘符改成跳出提示错误的那个盘 ...
分类：
系统相关 时间：
2021-05-24 04:53:39
阅读次数：
0
Spark SQL 及其 DataFrame 的基本操作 Q & A 1. Spark SQL 出现的原因是什么? 关系数据库已经流行多年，能较好的满足各类商业公司的业务数据管理需求，但关系数据库在大数据时代已经不能满足各种新增的用户需求。用户需要从不同数据源执行各种操作（包括结构化和非结构化数据） ...
分类：
数据库 时间：
2021-05-24 04:48:45
阅读次数：
0
kvm虚拟机快照创建与管理 KVM的快照功能和VMware一样，可以实现热备和回滚的功能，在进行快照之前需要确保磁盘格式必须是qcow2，因为raw格式是不支持快照的。 开启虚拟机 virsh start test #开启虚拟机 在宿主机使用virsh snapshot-create命令为指定的KV ...
分类：
其他好文 时间：
2021-05-24 04:18:59
阅读次数：
0
