码迷,mamicode.com
首页 > 全部
地铁译:Spark for python developers ---Spark的数据戏法
聚焦在 Twitter 上关于Apache Spark的数据, 这些是准备用于机器学习和流式处理应用的数据。 重点是如何通过分布式网络交换代码和数据,获得 串行化, 持久化 , 调度和缓存的实战经验 。 认真使用 Spark SQL, 交互性探索结构化和半结构化数据. Spark SQL 的基础数据结构是?Spark dataframe, Spark dataframe 受到了...
分类:编程语言   时间:2016-05-22 12:21:51    阅读次数:370
PE文件学习
1.介绍 什么是PE文件? PE文件是windows操作系统下使用的可执行文件格式。32位就直接叫PE或PE32,64位的就PE+或PE32+,注意不是PE64哦!!!! 学习PE文件其实就是学习结构体,里面储存了如何加载到内存,从何处开始运行,运行需要那些dll,需要多大的栈和内存等 初识PE文件 看看大概包括那些结构体吧 2.PE头...
分类:其他好文   时间:2016-05-22 12:19:40    阅读次数:162
公证通Factom白皮书
摘要: Factom利用比特币的区块链技术来革新商业社会和政府部门的数据管理和数据记录方式。 利用区块链技术帮助各种各样应用程序的开发,包括审计系统,医疗信息记录,供应链管理,投票系统,财产契据,法律应用,金融系统等。开发者能够创造新的应用程序,并把数据保存在区块链上面,同时不用受到直接把数据写入比特币区块链的各种限制:例如写入的数据速度,成本,大小等限制。 Factom维护了一...
分类:其他好文   时间:2016-05-22 12:21:19    阅读次数:468
数据仓库----Hive进阶篇 一
一、数据的导入1、使用Load语句执行数据的导入1.语法: 其中(中括号中表示可加指令): LOCAL:表示指定的文件路径是否是本地的,没有则说明是HDFS上的文件路径。 OVERWRITE:表示覆盖表中的已有数据。 PARTITION ():如果是向分区表中导入数据的话需要指定分区。 2.实例: (1).无分区情况: 其中的'...
分类:其他好文   时间:2016-05-22 12:18:57    阅读次数:217
Java NIO系列3:缓冲区
前言一直想把NIO系列的文章更新下去,只不过发现在入职支付宝后工作实在是忙,所以一直拖到现在。直接从一个学生过狗成为一名加班狗,好吧,这就是互联网公司的现状吧,但是每天都是充实的,而且发现其他的员工也基本非常乐意加班,难道这就是阿里的文化熏陶?!废话不多说,还是进入今天的正题,在前面的文章中,我们已经对Java的NIO有了一个粗浅的认识——主要之为了支持非阻塞I/O的操作,之前的BIO则是阻塞的。因...
分类:编程语言   时间:2016-05-22 12:19:19    阅读次数:262
HDOJ/HDU 1250 Hat's Fibonacci(大数~斐波拉契)
Problem Description A Fibonacci sequence is calculated by adding the previous two members the sequence, with the first two members being both 1. F(1) = 1, F(2) = 1, F(3) = 1,F(4) = 1, F(n>4) = F(n -...
分类:其他好文   时间:2016-05-22 12:21:25    阅读次数:166
用代码理解Acticity启动模式
本章内容 Activity 四种启动模式的理论知识 代码理解 Activity 四种启动模式的理论知识standard默认模式,可以不用写配置。在这个模式下,都会默认创建一个新的实例。因此,在这种模式下,可以有多个相同的实例,也允许多个相同Activity叠加。 singleTop当活动的启动模式指定为 singleTop,在启动活动时如果发现返回栈的栈顶已经是该活动,则认为可以直接使用它,不会再创...
分类:其他好文   时间:2016-05-22 12:19:40    阅读次数:116
计算机组成.就是它在运算.处理器CPU
处理器是要好好复习了,毕竟考试重点 主要的内容感觉还是在指令方面,包括指令的格式、指令集的设计、指令流水线、指令级并行。 东西慢慢整理吧,如果一边在网上搜索的估计会找到很多资料,但是耗费的时间太多了 国内的教材虽然有一定的局限性,但是tm的要考试啊 我觉得需要考试的人不止我一个,,,,,, 处理器的组成与功能 组成 基本功能 综合视角 处理器的指令集 什么是指...
分类:其他好文   时间:2016-05-22 12:20:15    阅读次数:372
Android开发实践 数据存储
所有应用程序必然有数据的输入输出,Android也是一样的,Android应用程序的参数设置、运行状态数据这些都需要保存到外部存储器上,保证关机后数据不丢失,如下是几种Android常见的数据存储方式: SharedPreferences:适合保存少量数据(一些配置信息、积分之类); SQLite:一个真正轻量级数据库,没有后台进程,整个数据库就对应于一个文件,适合大量数据需要存储、访问的情况。...
分类:移动开发   时间:2016-05-22 12:20:41    阅读次数:170
s3c2440 移植linux内核 添加网卡支持 yaffs2文件系统支持
三、内核的移植 1、移植内核 首先,下载源码包:https://www.kernel.org/ 现在时间为2014年12月20日其主界面截图为: 在此,就在下较新的稳定的版本作为尝试。在这里有个命名问题需要说明一下,最前面的2.6或者3.18是主版本号码,后面的次版本号是比如2.6.32.65中的32,再后面的比如2.6.32.65中的65是升级版本号,主版本号为奇数的是开发本...
分类:系统相关   时间:2016-05-22 12:20:32    阅读次数:315
Mongodb中数据聚合之基本聚合函数count、distinct、group
在之前的文章Mongodb中数据聚合之MapReduce>中,我们提到过Mongodb中进行数据聚合操作的一种方式——MapReduce,但是在大多数日常使用过程中,我们并不需要使用MapReduce来进行操作,不然有点杀鸡用牛刀的感觉,在这边文章中,我们就简单说说用自带的聚合函数进行数据聚合操作的实现。 Mongodb中自带的基本聚合函数有三种:count、distinct和group...
分类:数据库   时间:2016-05-22 12:17:54    阅读次数:235
Android JSON解析库Gson和Fast-json的使用对比和图书列表小案例
Android JSON解析库Gson和Fast-json的使用对比和图书列表小案例 继上篇json解析,我用了原生的json解析,但是在有些情况下我们不得不承认,一些优秀的json解析框架确实十分的好用,今天我们为了博客的保质保量,也就不分开写,我们直接拿比较火的Gson和Fast-json来使用,末尾在进行一些分析Android JSON原生解析的几种思路,以号码归属地,笑话大全,天气预报为...
分类:移动开发   时间:2016-05-22 12:20:00    阅读次数:202
struts2中使用注解配置Action
使用注解来配置Action可以实现零配置,零配置将从基于纯XML的配置转化为基于注解的配置。使用注解,可以在大多数情况下避免使用struts.xml文件来进行配置。        struts2框架提供了四个与Action相关的注解类型,分别为ParentPackage、Namespace、Result和Action。        ParentPackage:ParentPackage注解用...
分类:其他好文   时间:2016-05-22 12:18:11    阅读次数:141
MapReduce程序转换为Spark程序
MapReduce和Spark比较   目前的大数据处理可以分为以下三个类型:   1、复杂的批量数据处理(batch data processing),通常的时间跨度在数十分钟到数小时之间;   2、基于历史数据的交互式查询(interactive query),通常的时间跨度在数十秒到数分钟之间;   3、基于实时数据流的数据处理(streaming data processing),...
分类:其他好文   时间:2016-05-22 12:17:28    阅读次数:163
java/android 设计模式学习笔记(3)---工厂方法模式
这篇来介绍一下工厂方法模式(Factory Method Pattern),在实际开发过程中我们都习惯于直接使用 new 关键字用来创建一个对象,可是有时候对象的创造需要一系列的步骤:你可能需要计算或取得对象的初始设置;选择生成哪个子对象实例;或在生成你需要的对象之前必须先生成一些辅助功能的对象,这个时候就需要了解该对象创建的细节,也就是说使用的地方与该对象的实现耦合在了一起,不利于扩展,为了解决这...
分类:移动开发   时间:2016-05-22 12:18:51    阅读次数:191
Apache Flink源码解析之stream-operator
前面我们谈论了Flink stream中的transformation。你可以将transformation看成编写Flink程序并构建流式处理程序的必要组成部分(静态表现形式);而本篇我们将探讨transformation在Flink运行时对应的动态表现形式——operator。...
分类:Web程序   时间:2016-05-22 12:17:28    阅读次数:294
Liberty nova-api HTTP请求执行流程
本博客欢迎转载,但请注明出处 http://blog.csdn.net/ringoshen/article/details/51387038 由于能力与时间有限,文章内容难免错漏,望大家多加指正,相互进步! 0. 前言这次看了一下nova list命令的执行过程,整个过程可以分为几步:HTTP请求、URLMap分发、过滤、APIRouter到具体执行函数,接下来使用Postman组个包并...
分类:Windows程序   时间:2016-05-22 12:17:07    阅读次数:494
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!