一、从csv文件创建DataFrame
本文将介绍如何从csv文件创建DataFrame。
如何做？
从csv文件创建DataFrame主要包括以下几步骤：
1、在build.sbt文件里面添加spark-csv支持库；
2、创建SparkConf对象，其中包括Spark运行所有的环境信息；
3、创建SparkContext对象，它是进入Spark的核心切入点，...
分类：
其他好文 时间：
2016-05-23 15:07:15
阅读次数：
250
剧情提要：
[机器小伟]在[工程师阿伟]的陪同下进入了[九转金丹]之第八转的修炼。设想一个场景：
如果允许你带一台不连网的计算机去参加高考，你会放弃选择一个手拿计算器和草稿本吗
？阿伟决定和小伟来尝试一下用计算机算高考题会是怎样的感觉。
正剧开始：
星历2016年05月23日 12:04:40, 银河系厄尔斯星球中华帝国江南行省。
[工程师阿伟]正在和[机器小伟]一起做着20...
分类：
其他好文 时间：
2016-05-23 15:06:08
阅读次数：
180
最近项目需要做一个文件上传功能，做完了分享下，顺带当做笔记。
上传功能用后台用java实现，前端主要是js的ajax实现。后台还加入定时删除临时文件。
效果如图
首先是上传功能的主要类，下面是代码package util.upload;
import java.io.File;
import java.io.IOException;
import java.text.SimpleDat...
分类：
Web程序 时间：
2016-05-23 15:07:04
阅读次数：
403
Android性能优化合理管理内存节制的使用Service如果应用程序需要使用Service来执行后台任务的话，只有当任务正在执行的时候才应该让Service运行起来。当启动一个Service时，系统会倾向于将这个Service所依赖的进程进行保留，系统可以在LRUcache当中缓存的进程数量也会减少，导致切换程序的时候耗费更多性能。我们可以使用IntentService，当后台任务执行结束后会自动...
分类：
移动开发 时间：
2016-05-23 15:04:54
阅读次数：
211
Shell细小问题汇总
目录(?)[+]
Shell细小问题汇总
Shell细小问题汇总
使用find查找文件grep查找文件内容if 多条件组合判断示例Linux系统时间设置在远程节点上推送命令时需要特别注意和sudo -i和su -l的差异分析关于 varrun和pid文件测试参数汇总字符串测试参数汇总如何正确传递数组参数批量修改文件名配置163...
分类：
系统相关 时间：
2016-05-23 15:06:16
阅读次数：
291
Android 面试题总结之Android 基础（一）
转眼间毕业好久了，写程序也很久了，从高中就一直写到现在好多年了啊，学习了很多东西，把之前整理的资料和知识点慢慢分享出来。这里主要总结Android可能出的面试的题目比较全面\详细，持久更新，也欢迎大家补充，纠正，批评。
Android四大组件简介
请简要介绍Android的四大组件。
答案：Android系统有四种组件，这四种组件构成了A...
分类：
移动开发 时间：
2016-05-23 15:04:22
阅读次数：
250
周末想实现一下微信底部的渐变图案，折腾了一波，效果总算得上是差强人意。
下面是QQ的微信图标首先想到两个方案就是设置背景透明度，和属性动画。但效果都被否决了，属性动画效果逼真一些，但是顶多算是B货。要实现高仿的A货，尽管不喜欢用还是得自定义View了。
折腾了好久尽管效果很接近，但是效果还是有所区别。但是自从看了微信的图片资源后，立马就反应过来了，原来这玩意是这样设计的。利用两张同样大小的图片，...
分类：
微信 时间：
2016-05-23 15:06:32
阅读次数：
401
{devtool: 'source-map',//要启用source-map需加上此配置项，同时css或less的loader要加上参数?sourceMap，js的loader不用加 entry: entries,output: { path: './assets/', filename: '[na ...
分类：
Web程序 时间：
2016-05-23 15:04:39
阅读次数：
152
每个事件对应一个UITouch，继承UIResponse的类（UIView，UIViewController）都能响应事件，实现Touch的代理即可对事件做出处理 每个事件产生后都会保存在UIApplication的事件队列中，事件的传递是取第一个事件从父控件传递到子控件。 关于找到最合适的控件处理 ...
分类：
其他好文 时间：
2016-05-23 15:02:43
阅读次数：
127
一、PyChram下载官网：http://www.jetbrains.com/pycharm Windows:http://www.jetbrains.com/pycharm/download/#section=windows Linux:http://www.jetbrains.com/pycha ...
分类：
其他好文 时间：
2016-05-23 15:04:42
阅读次数：
366
Activiti工作流引擎使用 传智播客Activiti工作流视频教程（企业开发实例讲解） ...
分类：
其他好文 时间：
2016-05-23 15:02:50
阅读次数：
129
AWS RDS AWS上搭建数据库的时候，不是DB on EC2就是RDS，但是选择RDS时，Timezone怎么处理？ 「面向全球提供的AWS来讲理所当然的是UTC」，而RDS也不是例外。把服务器迁移到AWS时，「数据库能不能使用中国时间」是常见的一个问题。 DB on EC2的话，配置一下系统的 ...
分类：
数据库 时间：
2016-05-23 15:01:38
阅读次数：
354
1，安装cloudera-manager-agent 时，报错，报端口80问题， 开启80端口 firewall-cmd --zone=public --add-port=80/tcp --permanent 出现success表明添加成功 命令含义： --zone #作用域 --add-port= ...
分类：
其他好文 时间：
2016-05-23 15:02:07
阅读次数：
334
解决方法很简单，加上if(!IsPostBack) 就OK了。 protected void Page_Load(object sender, EventArgs e) { if(!IsPostBack) InitData(); } ...
分类：
其他好文 时间：
2016-05-23 15:01:42
阅读次数：
147
编写一个类A，该类创建的对象可以调用方法f输出小写的英文字母表。然后再编写一个A类的子类B，要求子类B必须继承类A的方法f（不允许重写），子类B创建的对象不仅可以调用方法f输出小写的英文字母表，而且可以调用子类新增的方法g输出大写的英文字母表。最后编写主类C，在主类的main方法中测试类A与类B。 ...
分类：
其他好文 时间：
2016-05-23 15:03:24
阅读次数：
175
JavaScript中void是一个操作符，该操作符指定要计算一个表达式但是不返回值。 void 操作符用法格式如下： 1. javascript:void (expression) 2. javascript:void expression expression是一个要计算的 JavaScript ...
分类：
编程语言 时间：
2016-05-23 15:03:14
阅读次数：
121
bplabel Linux系統，該命令位於NBU server的如下目錄：/usr/openv/netbackup/bin/admincmd bplabel – write NetBackup label on tape media 1.作用：erase或者label一個unassigned的med ...
分类：
其他好文 时间：
2016-05-23 15:02:46
阅读次数：
612
