人生苦短,必须性感! 1、为什么学习Python? 人生苦短?人间不值得?想想自己的初心吧! 2、通过什么途径学习的Python? 官网、网上视频、学习网站、论坛、大牛的辅导 3、Python和Java、PHP、C、C#、C++等其他语言的对比? (1)、python代码,简介,明确,优雅,简单易懂 ...
分类:
编程语言 时间:
2019-05-07 21:21:41
阅读次数:
198
Spark 通信架构 1、spark 一开始使用 akka 作为网络通信框架,spark 2.X 版本以后完全抛弃 akka,而使用 netty 作为新的网络通信框架。最主要原因:spark 对 akka 没有维护,需要 akka 更新,spark 的发展受到了 akka 的牵制,akka 版本之间 ...
分类:
其他好文 时间:
2019-05-02 21:48:37
阅读次数:
152
题目描述:有3扇关闭的门,一扇门后面停着汽车,其余门后是山羊,只有主持人知道每扇门后面是什么。参赛者可以选择一扇门,在开启它之前,主持人会开启另外一扇门,露出门后的山羊,然后允许参赛者更换自己的选择。 1、按照你的第一感觉回答,你觉得不换选择能有更高的几率获得汽车,还是换选择能有更高的几率获得汽车? ...
分类:
其他好文 时间:
2019-04-18 23:28:45
阅读次数:
282
一、发行版本 ? Hadoop发行版本分为开源 社区版 和 商业版 ,社区版是指由Apache软件基金会维护的版本,是官方维护的版本体系。商业版Hadoop是指由第三方商业公司在社区版Hadoop基础上进行了一些修改、整合以及各个服务组件兼容性测试而发行的版本,比较著名的有cloudera的CDH、 ...
分类:
其他好文 时间:
2019-04-14 16:33:00
阅读次数:
168
一、Spark专业术语定义 二、 Spark的任务提交机制 一、Spark专业术语定义 从以下十五个方面描述spark概念。 1 application: spark应用程序 2 Driver:驱动程序 3 Cluster Mannger:集群管理器 4 Executor: 计算器 5 Worker ...
分类:
其他好文 时间:
2019-04-06 14:11:30
阅读次数:
124
【使用场景】 对RDD使用join类操作,或者是在Spark SQL中使用join语句时,而且join操作中的一个RDD或表的数据量比较小(例如几百MB或者1~2GB),比较适用此方案。。 【解决方案】 小表join大表转为小表broadcast+map大表实现。具体为: 普通的join是会shuf ...
分类:
其他好文 时间:
2019-03-24 10:02:41
阅读次数:
515
package com.zs.Demo; import java.util.ArrayList; import java.util.Collections; import java.util.HashMap; import java.util.Map; public class DouDiZhu {... ...
分类:
其他好文 时间:
2019-03-23 16:02:39
阅读次数:
119
python之算法 这个合格程序员还是需要熟练掌握一些算法的,今天主要介绍一些排序算法 递归是算法中一个比较核心的概念,有三个特点, 1 调用自身 2 具有结束条件 3 代码规模逐渐减少 1 调用自身 2 具有结束条件 3 代码规模逐渐减少 以下四个函数只有两个为递归 这里需要注意一些 fun3和f ...
分类:
编程语言 时间:
2019-03-17 10:53:03
阅读次数:
191
网站点击流数据分析项目 之现学现卖 1:网站点击流数据分析项目推荐书籍: 可以看看百度如何实现这个功能的:https://tongji.baidu.com/web/welcome/login 1 网站点击流数据分析,业务知识,推荐书籍: 2 《网站分析实战——如何以数据驱动决策,提升网站价值》王彦平 ...
分类:
Web程序 时间:
2019-03-08 16:38:54
阅读次数:
240