码迷,mamicode.com
首页 >  
搜索关键字:spark streaming redis    ( 30354个结果
nginx的使用
(1)查看nginx的运行状态(将后面的nginx改为 java可以看java程序的运行状态,改为redis可以看redis) ps -ef | grep nginx (2)一般安装后的配置文件位置是(也可以ps -ef | grep nginx看配置文件位置) /usr/local/nginx/c ...
分类:其他好文   时间:2021-06-02 11:06:27    阅读次数:0
[CentOS7]redis设置开机启动,设置密码
[CentOS7]redis设置开机启动,设置密码 简介 上篇文章介绍了如何安装redis,但每次重启服务器之后redis不会自启,这里将介绍如何进行自启设置,以及如何设置redis的密码,进行密码验证登陆。 上篇文章: Centos7安装Redis 步骤 1、设置redis.conf中daemon ...
分类:其他好文   时间:2021-06-02 10:40:47    阅读次数:0
Spark 通过 jdbc 写入 Clickhouse
说明 使用了自定义的数据库连接池,没有对连接做timeout处理,以后再完善。 由于jdbc不能完全支持clickhouse中的数据类型,采用raw sql的方式处理。 后期考虑封装Java对象到Clickhouse数据类型的映射。 插入时应采用批量写入,例子中的代码仅为测试目的,没有做封装。 <d ...
分类:数据库   时间:2021-06-02 10:35:03    阅读次数:0
gitlab 403 forbidden 报错解决
可能是多次密码错误之类的,触发了gitlab的防爆破,解决办法是删除redis里面的相关数据/opt/gitlab/embedded/bin/redis-cli -s /var/opt/gitlab/redis/redis.socket keys '*' | grep 'rack::attack' ...
分类:其他好文   时间:2021-05-25 18:42:43    阅读次数:0
redis 主从 + 哨兵模式集群部署(3 台机器部署方案)
前言 本文只讲如何部署,然后会贴出具体配置,以及如何验证是否部署成功(redis 版本采用 4.0.6 )。既不会介绍 redis 如何安装(本人采用源码安装方式),也不会涉及主从复制,哨兵模式具体原理及工作机制等内容。 后续会再补充 ~ 配置 关于 redis 的配置文件 redis.conf 的 ...
分类:其他好文   时间:2021-05-25 18:41:45    阅读次数:0
08 学生课程分数的Spark SQL分析
用DataFrame的操作或SQL语句完成以下数据分析要求,并和用RDD操作的实现进行对比: 每个分数+5分。 2.总共有多少学生? 3.总共开设了哪些课程? 4.每个学生选修了多少门课? 5.每门课程有多少个学生选? 6.每门课程大于95分的学生人数? 7.Tom选修了几门课?每门课多少分? 8. ...
分类:数据库   时间:2021-05-25 17:40:47    阅读次数:0
Spark 集群安装部署
安装准备 Spark 集群和 Hadoop 类似,也是采用主从架构,Spark 中的主服务器进程就叫 Master(standalone 模式),从服务器进程叫 Worker Spark 集群规划如下: node-01:Master node-02:Worker node-03:Worker 安装步 ...
分类:其他好文   时间:2021-05-24 17:07:05    阅读次数:0
08 学生课程分数的Spark SQL分析
08 学生课程分数的Spark SQL分析 一. 读学生课程分数文件chapter4-data01.txt,创建DataFrame。 1.生成“表头” 2.生成“表中的记录” 3.把“表头”和“表中的记录”拼装在一起 用DataFrame的操作或SQL语句完成以下数据分析要求,并和用RDD操作的实现 ...
分类:数据库   时间:2021-05-24 17:01:32    阅读次数:0
08 学生课程分数的Spark SQL分析
读学生课程分数文件chapter4-data01.txt,创建DataFrame。 1.生成“表头” 2.生成“表中的记录” 3.把“表头”和“表中的记录”拼装在一起 用DataFrame的操作或SQL语句完成以下数据分析要求,并和用RDD操作的实现进行对比: 每个分数+5分。 总共有多少学生? 总 ...
分类:数据库   时间:2021-05-24 16:59:25    阅读次数:0
宿主机连不上VM虚拟机内的应用
五一假期回来,使用xshell连不上虚拟机内的MySQL、redis,但是虚拟机还是可以上外网,使用百度没有问题,但这样还是对我的工作产生了一定影响。我一开始以为是电脑的IP改变了,毕竟离开了4天了。但是,根据网上的建议,改了VM的网络适配器为固定IP,还是没有用,就差改虚拟机的IP。后来就不了了之 ...
分类:其他好文   时间:2021-05-24 16:51:28    阅读次数:0
30354条   上一页 1 ... 15 16 17 18 19 ... 3036 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!