1.什么是结构化流. 结构化流(Structured Streaming),是一种基于Spark-SQL引擎构建的,可容错的,可扩展的流处理引擎. 它以微批量计算的形式来表达流式计算,随着流式数据持续到达,它能持续的进行处理并更新最终计算结果. 它使用Spark-SQL带来的丰富的API,来表示流聚 ...
分类：
其他好文 时间：
2018-07-06 01:45:33
阅读次数：
169
我也是引入了jackson-dataformat-xml这个依赖，它是提供了jackson将实体类转化为xml相关的作用。而本身jackson是可以将实体类转化为json的，所以这样Jackson是可以将实体类转化为两种类型的数据，而具体要转化为哪一种数据，是要看http请求里面的accept头信息 ...
分类：
Web程序 时间：
2018-07-04 18:59:01
阅读次数：
172
chown将指定文件的拥有者改为指定的用户或组，用户可以是用户名或者用户ID；组可以是组名或者组ID；文件是以空格分开的要改变权限的文件列表，支持通配符。 chown常见命令参数Usage: chown [OPTION]... [OWNER][:[GROUP]] FILE... or: chown ... ...
分类：
系统相关 时间：
2018-07-03 19:52:48
阅读次数：
219
导航栏，部分项目不能靠右排列。 ?（已经解决） devise 默认的是html.erb格式。以下是改变方法: https://github.com/plataformatec/devise/wiki/How-To:-Create-Haml-and-Slim-Views 另外devise不符合国内的使 ...
分类：
其他好文 时间：
2018-06-29 21:41:30
阅读次数：
161
# 创建空DataFrame df = pd.DataFrame(columns = ['YJML','EJML','SJML','WZLB','GGXHPZ','CGMS']) # 插入数据（忽略索引） df = df.append(kjcgml.loc[i].append(bzwzcgml.lo ...
分类：
编程语言 时间：
2018-06-26 18:05:13
阅读次数：
2076
创建空dataframe 1,data=pd.DataFrame() 2,data=pd.DataFrame(columns=['a','b','c','d']) 删除列 data.drop('a',axis=1) 删除行 data.drop([0,1]) #按索引删除 ...
分类：
其他好文 时间：
2018-06-24 16:55:49
阅读次数：
164
插入节点： 1.append（）和appendTo（）：在现存元素的内部，从后面插入元素 2. prepend()和prependTo()：在现存元素的内部从前面插入元素 3. after()和insertAfter()：在现存元素的外部，从后面插入元素 4. before()和insertBefo ...
分类：
Web程序 时间：
2018-06-22 17:39:26
阅读次数：
176
spark sql基础操作 SQLContext可能需要自己创建。 var sqlContext=new org.apache.spark.sql SQLContext(sc) sc 是指spark context。 scala> val textFile=sc.textFile("file:/// ...
分类：
其他好文 时间：
2018-06-21 23:42:51
阅读次数：
203
详细描述： $ele.append、.appendTo、.prepend、.prependTo、.before、.insertBefore、.after、.insertAfter、.replaceAll 这些方法调用之后，如果被添加的那个对象是页面上原有的对象，当调用这些方法后，原有的那个对象会消失 ...
分类：
移动开发 时间：
2018-06-20 19:03:24
阅读次数：
180
之所以选择Sqoop1是因为Sqoop2目前问题太多。无法正常使用，综合比较后选择Sqoop1。 Sqoop1安装配置比较简单 一、安装部署 （1）、下载地址：http://archive.cloudera.com/cdh5/cdh/5/sqoop-1.4.6-cdh5.5.2.tar.gz 解压到 ...
分类：
其他好文 时间：
2018-06-19 23:24:20
阅读次数：
303
