码迷,mamicode.com
首页 >  
搜索关键字:spark streaming redis    ( 30354个结果
08 学生课程分数的Spark SQL分析
一. 读学生课程分数文件chapter4-data01.txt,创建DataFrame。 1.生成“表头” 2.生成“表中的记录” 3.把“表头”和“表中的记录”拼装在一起 用DataFrame的操作或SQL语句完成以下数据分析要求,并和用RDD操作的实现进行对比: 每个分数+5分。 df_scs. ...
分类:数据库   时间:2021-05-24 16:51:04    阅读次数:0
08 学生课程分数的Spark SQL分析
1.用DataFrame的操作或SQL语句完成以下数据分析要求: 2.总共有多少学生? 3.开设了多少门课程? 4.每个学生选修了多少门课? 5.每门课程有多少个学生选? 6.Tom选修了几门课?每门课多少分? 7.Tom的成绩按分数大小排序。 8.Tom的平均分。 9.每个分数+5分。 10.求每 ...
分类:数据库   时间:2021-05-24 16:49:50    阅读次数:0
Redis面试题 Redis有哪几种数据结构?
Redis有哪几种数据结构? ● String——字符串String数据结构是简单的key-value类型,value不仅可以是String,也可以是数字(当数字类型用Long可以表示的时候encoding就是整型,其他都存储在sdshdr当做字符串)。 ● Hash——字典在Memcached中, ...
分类:其他好文   时间:2021-05-24 16:31:21    阅读次数:0
08 学生课程分数的Spark SQL分析
用DataFrame的操作或SQL语句完成以下数据分析要求,并和用RDD操作的实现进行对比: 每个分数+5分。 df_scs.select('name', 'course', df_scs.score+5).show() 总共有多少学生? 总共开设了哪些课程? df_scs.select('name ...
分类:数据库   时间:2021-05-24 15:33:34    阅读次数:0
分布式锁分析:使用Redis实现分布式事务中的锁机制
分布式协调服务 Zookeeper是分布式协调服务框架 分布式协调技术: 主要用来解决分布式环境当中多个进程之间的同步控制,让进程有序的去访问某种临界资源,防止造成"脏数据"的后果 分布式协调技术的核心就是实现分布式锁 分布式锁 分布式锁: 为了防止分布式系统中的多个进程之间相互干扰,需要分布式协调 ...
分类:其他好文   时间:2021-05-24 14:40:54    阅读次数:0
redis缓存机制备注
1:redis缓存在建立的时候一定要建准确,一定要大范围的建,不要只针对一个产品或者一个很小的点进行建设,这样的命中率特别低 2:命名时一定要注意,针对不同的文件最好在命名的时候命名成有针对性的文件,比如A站下B列表的一个功能C,命名时可以如下A:B:C,这样在后续的清除缓存的时候也可以方便清除 3 ...
分类:其他好文   时间:2021-05-24 14:01:44    阅读次数:0
redis 未授权访问(写公钥、写计划任务)
写公钥 ssh-keygen -t rsa # 生成key (echo -e "\n\n"; cat id_rsa.pub; echo -e "\n\n") > /tmp/key.txt # 前后加换行 cat /tmp/key.txt | redis-cli -h 59.xx.xx.157 -x ...
分类:其他好文   时间:2021-05-24 13:41:02    阅读次数:0
Govern Service 基于 Redis 的服务治理平台
Govern Service 基于 Redis 的服务治理平台(服务注册/发现 & 配置中心) Govern Service 是一个轻量级、低成本的服务注册、服务发现、 配置服务 SDK,通过使用现有基础设施中的 Redis (相信你已经部署了Redis),不用给运维部署带来额外的成本与负担。 借助 ...
分类:其他好文   时间:2021-05-24 13:28:01    阅读次数:0
Redis的持久化和事务小结
持久化配置 RDB(Redis DataBase)策略 , redis默认策略 AOF(Append Only File)策略 小结: 根据需求选择开启持久化策略,一般开启RDB就够了 事务 Redis的事务:允许把一组redis命令放在一起,把命令序列化,然后一起执行,保证部分原子性 multi ...
分类:其他好文   时间:2021-05-24 10:23:15    阅读次数:0
宝塔redi状态检测 如果停止则重启 放计划任务
ps=`ps -efl|grep redis|grep -v $0|grep -v grep|wc -l` if [ $ps -eq 0 ]; then rm -f /www/server/redis/redis.pid echo -e "\n$(date '+%Y-%m-%d %H:%M:%S') ...
分类:其他好文   时间:2021-05-24 10:05:33    阅读次数:0
30354条   上一页 1 ... 16 17 18 19 20 ... 3036 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!