本人 想 做一个 依托人工智能 ?大数据处理 即时通讯 流媒体技术 实现的O2O? ?app ?同时会有PC web版 ?微信公众平台版 exe版 ?dmg版本 ,想法创意都很好,我已经实现 并 完成了 服务器 所有复杂的任务,现在...
分类:
其他好文 时间:
2015-02-04 22:00:19
阅读次数:
235
自动化测试人员,需要掌握测试框架. 用代码测试代码.需要熟悉一种前台脚本,同时对后台逻辑处理要有所了解.IT从业三年,感觉欠缺的依然很多.唯一留下的是 见过很多场景, 知道一些工作原理的方法. 未来三五年,需要长足发展, 否则不足以立足.~英语能力、java及其周边技术、数据库与大数据处理、金融投资...
分类:
其他好文 时间:
2015-02-04 20:18:42
阅读次数:
178
-调研
话说移动互联网正值风起云涌期间,各路编程高手都是摩拳擦掌,何况企业公司都开始接受现实,走移动办公,信息云端,大数据处理的步伐,在这本该三足鼎立的时刻,微软显得有点步履蹒跚,导致移动端最值得进军的平台被iOS 和 Android 几乎瓜分,这不符合历史轨迹啊,希望 WP 能厚积薄发,重回当年PC时代的辉煌。
-前序
这里就不再指点江山,直奔主题吧,来看看做同样一个功能,在iOS...
分类:
移动开发 时间:
2015-02-03 17:15:39
阅读次数:
249
HDFS分布式文件系统:优点:支持超大文件存储、流式访问、一次写入多次读取。缺点:不适应大量小文件、不适应低时延的数据访问、不适应多用户访问任意修改文件。1.hadoop用于大数据处理,在数据量较小时,并不适用于实时性强的任务,并不是所有的job放到hadoop上,性能都会提升。2.大量小文件的情况...
分类:
其他好文 时间:
2015-01-30 21:00:06
阅读次数:
358
一:为什么要预处理数据?(1)现实世界的数据是肮脏的(不完整,含噪声,不一致)(2)没有高质量的数据,就没有高质量的挖掘结果(高质量的决策必须依赖于高质量的数据;数据仓库须要对高质量的数据进行一致地集成)(3)原始数据中存在的问题:不一致 —— 数据内含出现不一致情况反复不完整 —— 感兴趣的属性没...
分类:
其他好文 时间:
2015-01-27 10:46:58
阅读次数:
215
因Python语言在大数据处理,以及科学计算方向的雄起,另Django等Web框架已经在业界获得共识多年,所以本文拟搭建Python的学习开发环境。由于本人的笔记本及实验室主机系统环境以Windows为主,所以本文意在搭建Windows环境下的Python开发环境。本文的内容主要分为以下几个部分:1...
分类:
编程语言 时间:
2015-01-24 23:55:41
阅读次数:
321
一:起因
(1)最近一直在处理大数据,从MB ----> GB的变化,是一次质的飞跃,相应的工具也在变 从widows到linux,从单机单核 到 hadoop多节点的计算
(2)问题来了,面对海量的数据,如何从中挖掘实用的信息或者发现潜在的现象,可视化工具可能是必不可少的 ;
(3)可视化工具可以说百度一大篇,可是作为研究者的我们,程序猿的我们可能更希望能够抽象出一种数学模型,...
分类:
其他好文 时间:
2015-01-21 13:32:02
阅读次数:
180
Apache storm 是一个由twitter开源的大数据处理系统,与其他系统不同的是,storm旨在用于分布式实时处理并且与语言无关。笔者所认知的storm使用场景诸 如 实时日志分析、网站用户行为实时分析、实时计算等,目前很多公司也都把storm作为自己的大数据架构的一部分,来实现一些实时业务...
分类:
Web程序 时间:
2015-01-14 14:10:42
阅读次数:
207
本文利用twitter做为数据源,介绍使用Oracle大数据平台及Oralce Data Integrator工具,完成从twitter抽取数据,在hadoop平台上处理数据,并最终加载到oracle数据库。数据集成分为三个阶段:获取、整理、分析和决策。 本文从实际出发,讲述大数据处理的真实案例,....
分类:
其他好文 时间:
2015-01-09 19:17:27
阅读次数:
248
一:简介以及学习的途径
(1)吉布斯采样(Gibbs Sampling)及相关算法 (学习向Gibbs sampling, EM, MCMC算法 等的好地方)
1) 推荐大家读Bishop的Pattern Recognition and Machine Learning,讲的很清楚,偏理论一些;
2) 读artificial Intelligence,2、3版...
分类:
其他好文 时间:
2014-12-27 21:48:39
阅读次数:
304