SQL Server 2008是一个重大的产品版本,它推出了许多新的特性和关键的改进,使得它成为至今为止的最强大和最全面的SQL Server版本。 在现今数据的世界里,公司要获得成功和不断发展,他们需要定位主要的数据趋势的愿景。微软的这个数据平台愿景帮助公司满足这些数据爆炸和下一代数据驱动应用程....
分类:
数据库 时间:
2015-01-14 14:14:36
阅读次数:
148
本文利用twitter做为数据源,介绍使用Oracle大数据平台及Oralce Data Integrator工具,完成从twitter抽取数据,在hadoop平台上处理数据,并最终加载到oracle数据库。数据集成分为三个阶段:获取、整理、分析和决策。 本文从实际出发,讲述大数据处理的真实案例,....
分类:
其他好文 时间:
2015-01-09 19:17:27
阅读次数:
248
已经毕业工作快满两年了,从一家垄断国字号企业跳到某电商平台,应该是我的职业生涯第一跳了,也很荣幸地投身入互联网浪潮之中。没过多久就融入了这家朝气蓬勃的大家庭。回汉后,起初打算做机器学习、数据挖掘的相关工作,以能延续研究生的课题。不过作为新东家BI组第一位员工,不得不着手搭建基础数据平台。
工作成果与心得
基础数据平台和报表系统,爬虫
五个月,小半年,我们三兄弟的工作成果也是比较显著,在被...
分类:
其他好文 时间:
2015-01-05 23:29:51
阅读次数:
326
SQL Server 2008是一个重大的产品版本,它推出了许多新的特性和关键的改进,使得它成为至今为止的最强大和最全面的SQL Server版本。 在现今数据的世界里,公司要获得成功和不断发展,他们需要定位主要的数据趋势的愿景。微软的这个数据平台愿景帮助公司满足这些数据爆炸和下一代数据驱动应用.....
分类:
数据库 时间:
2015-01-04 19:02:31
阅读次数:
284
文章出自: http://blog.csdn.net/lili72
1 能定时发起各类型的任务
1.1 任务类型比如 shell脚本,或者jar 程序,或者调用存储过程
1.2 可以设置每天什么时候开始执行,每天执行几次。或者每隔多久执行一次(类crontab)
1.3 数据平台一般的任务类型有:
1.3.1 101任务: 检查数据源文件是否到齐(包括文件个数,或者...
分类:
其他好文 时间:
2015-01-02 16:06:34
阅读次数:
204
移动终端App&Platform开发的高端技术和策略课程By高焕堂老师一、学员条件:l具有3年以上Android应用、平台或底层服务的软件开发经验l熟悉Java、C/C++和JS编程l拥有移动终端设备和嵌入式开发的基本知识l对Spart/Hadoop/Hbase/Scala数据平台有初步认识二、大纲目录:Part-A主..
分类:
移动开发 时间:
2014-12-27 11:30:43
阅读次数:
247
在云计算提供的分布式资源池构建能够自动部署业务应用的平台组件,该平台组件能够非常简易的被众多的并发终端使用,从而轻而易举的提供业务支持;尤其是值得注意的是,如果有需要的话,我们的不同业务组件和业务本身可以发生数据和资源的共享,这对于资源和数据的复用,尤其是对于效率的提升是至关重要的。课程介绍 基于“...
分类:
其他好文 时间:
2014-12-25 00:02:39
阅读次数:
354
在云计算提供的分布式资源池构建能够自动部署业务应用的平台组件,该平台组件能够非常简易的被众多的并发终端使用,从而轻而易举的提供业务支持;尤其是值得注意的是,如果有需要的话,我们的不同业务组件和业务本身可以发生数据和资源的共享,这对于资源和数据的复用,尤其是对于效率的提升是至关重要的。课程介绍基于“在...
分类:
其他好文 时间:
2014-12-23 06:41:50
阅读次数:
137
一:针对大数据平台的linux如下搭建,为了方便截图,采用的虚拟机,与真实环境有点出入
二:步骤如下
1. 在vmware中选择加载虚拟光盘iso文件,然后进入安装
2. 默认选择第一项 Install or upgrade an existing system,然后如果机器没啥问题,就选择Skip跳过test
3.选择Next
4. 建议选择English,在最...
分类:
系统相关 时间:
2014-12-22 18:00:50
阅读次数:
232
??
0、概述
Zoomeye是个网络空间的搜索引擎,它不同于传统意义上的搜索引擎,而是一种可以搜索网络组件和网络设备的搜索引擎。
这种以各大组件指纹作为识别基础的数据平台,更多的是为了使得安全研究人员更好地评估漏洞的影响范围与其中隐含的数据模式。
1、架构分析
这是从网上搜索到的一张Zoomeye的后端架构图,主要分为调度框架、ES存储、UI呈现等模块。对于一次漏洞的评估,启动调度框架...
分类:
其他好文 时间:
2014-12-16 22:39:13
阅读次数:
586