Spark SQL是Spark用来处理结构化数据的一个模块,它提供了一个编程抽象叫做DataFrame并且作为分布式SQL查询引擎的作用。为什么要学习Spark SQL?如果大家了解Hive的话,应该知道它是将Hive SQL转换成MapReduce然后提交到集群上执行,大大简化了编写MapRedu ...
分类:
数据库 时间:
2020-04-05 13:33:32
阅读次数:
113
如果Docker Swarm集群中运行了mysql、nginx等服务,这些服务的数据如果没有挂载到宿主机中,那么容器一旦停止运行,那就意味着数据丢失。 有什么方法可以解决swarm集群中运行的服务能够数据持久化呢?我们可以通过volme、nfs等方法来实现swarm集群应用数据持久化,其实也和doc ...
分类:
其他好文 时间:
2020-04-05 13:32:26
阅读次数:
61
一、什么是Presto? 背景知识:Hive的缺点和Presto的背景 Hive使用MapReduce作为底层计算框架,是专为批处理设计的。但随着数据越来越多,使用Hive进行一个简单的数据查询可能要花费几分到几小时,显然不能满足交互式查询的需求。Presto是一个分布式SQL查询引擎,它被设计为用 ...
分类:
其他好文 时间:
2020-04-04 11:41:05
阅读次数:
80
微服务 架构 php+go 赵强 http://note.youdao.com/noteshare?id=903f3d4028a163241c4c3eff2a9f9df7 https://blog.dingkewz.com/post/tech/go_ewan_microservices_in_gol ...
分类:
Web程序 时间:
2019-05-09 12:10:50
阅读次数:
423
本文以三个节点为例(一个Cloudera Manager节点,两个Agent节点),全面细致的介绍了CDH 5.12的安装与部署。
分类:
其他好文 时间:
2018-05-13 22:05:08
阅读次数:
242
赵强老师实战微课系列课程Oracle数据库、大数据、Weblogic中间件永久免费!!!(*)赵强老师实战微课之一:在OracleSQL*PLUS中修改SQL语句http://edu.51cto.com/course/course_id-9016.html(*)赵强老师实战微课之二:搭建Hadoop的Eclipse开发环境http://edu.51cto.com/cours..
分类:
其他好文 时间:
2017-05-15 23:49:25
阅读次数:
206
赵强老师实战微课系列课程Oracle数据库、大数据、Weblogic中间件永久免费!!!(*)赵强老师实战微课之一:在OracleSQL*PLUS中修改SQL语句http://edu.51cto.com/course/course_id-9016.html(*)赵强老师实战微课之二:搭建Hadoop的Eclipse开发环境http://edu.51cto.com/cours..
分类:
其他好文 时间:
2017-05-15 23:49:07
阅读次数:
626
大数据实时计算公开课课程简介课程简介实时处理系统,也称为流式处理系统,是目前大数据领域中非常热门的处理技术。相对于传统的离线数据处理系统,实时系统能够更加准确的得到处理的结果数据。目前实时处理系统有两大主流框架:一种是基于ApacheKafka和ApacheStorm的框架;另..
分类:
其他好文 时间:
2017-04-15 12:50:13
阅读次数:
138
小强(赵强)老师购课送书活动启动啦~~51CTO学院“IT充电节”活动即将来袭,小强赵强老师感恩大回馈:活动期间(会员享受视频课程6折,套餐折上折8折)购课满499元,即可获赠《小强软件测试疯狂讲师——性能及自动化》书一本。(价值39.8元)备注:此次活动送书仅限10本,数量..
分类:
其他好文 时间:
2017-04-14 10:42:02
阅读次数:
153
2017年4月18日晚20:00-21:30主题一:大数据——大数据实时计算免费公开课免费公开课内容简介:1.什么是消息系统?什么是实时处理系统?2.传统的基于中间件的消息处理系统3.基于ApacheKafka的实时消息系统4.基于ApacheStorm的实时消息处理系统,即:流式处理系统讲师:赵强免费..
分类:
其他好文 时间:
2017-04-12 18:53:16
阅读次数:
332