第一步 安装JDK JDk1.7. 下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html 一路猛击‘下一步’,OK。安装完成后配置环境变量: JAVA_HOME = E:\Ja ...
分类:
编程语言 时间:
2019-01-12 12:11:03
阅读次数:
226
这个例子只是简单的实现了单机版的聊天功能,自己跟自己聊,啦啦~~ 主要还是展示RecyclerView控件的使用吧~ 参考我之前写的文章: android中RecyclerView控件的使用 android中使用Nine-Patch图片 1、先添加一个关于聊天内容的Chat.java类: Chat. ...
分类:
移动开发 时间:
2019-01-11 11:45:22
阅读次数:
691
使用线程池方式—Callable接口 Callable接口:与Runnable接口功能相似,用来指定线程的任务。其中的call()方法,用来返回线程任务执行完毕后的结果,call方法可抛出异常。 ExecutorService:线程池类 Future submit(Callable task):获取... ...
分类:
编程语言 时间:
2019-01-10 16:33:22
阅读次数:
222
第一种方式:打包到jar应用程序 操作:将第三方jar文件打包到最终形成的spark应用程序jar文件中 应用场景:第三方jar文件比较小,应用的地方比较少 第二种方式:spark-submit 参数 --jars 操作:使用spark-submit提交命令的参数: --jars 要求: 1、使用s ...
分类:
编程语言 时间:
2019-01-10 14:28:03
阅读次数:
252
(1)可以接受的任务类型 submit: execute: 可以看出: execute只能接受Runnable类型的任务 submit不管是Runnable还是Callable类型的任务都可以接受,但是Runnable返回值均为void,所以使用Future的get()获得的还是null (2)返回 ...
分类:
编程语言 时间:
2019-01-10 10:55:47
阅读次数:
263
读取多个目录下的本地文件,多个目录通过循环遍历的方式,以参数传递: #!/bin/bash i=0while [ $i -lt 10000 ] do echo "i=$i" spark-submit --class com.link.fblx.readFromPath --driver-memory ...
分类:
系统相关 时间:
2019-01-09 17:33:13
阅读次数:
244
业务需求 实现一个根据spark任务的appName来监控任务是否存在,及任务是否卡死的监控。 1)给定一个appName,根据appName从yarn application -list中验证任务是否存在,不存在则调用spark-submit.sh脚本来启动任务; 2)如果任务存在yarn app ...
分类:
移动开发 时间:
2019-01-08 23:38:01
阅读次数:
387
点击type为botton的input不会提交表单,但是如果在浏览器将type值改为submit 则会提交 ...
分类:
其他好文 时间:
2019-01-08 21:58:53
阅读次数:
113
watch和computed是vue框架中很重要的特性。 那么,他们是怎么作用于对象数组的? 今天我们就来探究一下。 上代码。 首先是初始化(进入这个页面时)。 从日志中可以看到,先调用了computed,再调用了watch。 看代码。数据绑定是绑定了computed:testNum,所以初始化时就 ...
分类:
编程语言 时间:
2019-01-08 21:57:19
阅读次数:
429
(1)部署部署方式:sparkstandalone集群、yarn集群、meoss集群...driver的HA:如果希望driver程序在失败之后自动重启,那么需要在程序中使用getOrcreate方法重构streamingContext对象,以及在spark-submit中添加参数。Checkpoint目录的设置:如果程序使用到checkpoint目录,就必须配置一个hdfs兼容的文件系统作为ch
分类:
其他好文 时间:
2019-01-08 10:52:20
阅读次数:
177