码迷,mamicode.com
首页 >  
搜索关键字:处理海量数据    ( 186个结果
概率论机器学习的先验知识(上)
随着Hadoop等大数据的出现和技术的发展,机器学习越来越多地进入人们的视线。其实早Hadoop之前,机器学习和数据挖掘已经存在,作为一个单独的学科,为什么hadoop之后出现,机器学习是如此引人注目了?因是hadoop的出现使非常多人拥有了处理海量数据的技术支撑。进而发现数据的重要性,而要...
分类:其他好文   时间:2015-07-05 15:02:45    阅读次数:105
Storm:最火的流式处理框架
http://tech.uc.cn/?p=2159诞 生 在2011年Storm开源之前,由于Hadoop的火红,整个业界都在喋喋不休地谈论大数据。Hadoop的高吞吐,海量数据处理的能力使得人们可以方便地处理海量数据。但是,Hadoop的缺点也和它的优点同样鲜明——延迟大,响应缓慢,运维复杂。 ....
分类:其他好文   时间:2015-07-02 17:16:58    阅读次数:165
Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)
Hadoop在处理海量数据分析方面具有独天优势。今天花时间在自己的Linux上搭建了伪分布模式,期间经历很多曲折,现在将经验总结如下。 首先,了解Hadoop的三种安装模式: 1. 单机模式. 单机模式是Hadoop的默认模。当...
分类:系统相关   时间:2015-06-24 19:27:47    阅读次数:231
Java在处理大数据的时候一些小技巧
转载自:http://soft.chinabyte.com/database/258/12609258.shtml 众所周知,java在处理数据量比较大的时候,加载到内存必然会导致内存溢出,而在一些数据处理中我们不得不去处理海量数据,在做数据处理中,我们常见的手段是分解,压缩,并行,临时文件等方法....
分类:编程语言   时间:2015-06-08 00:48:21    阅读次数:156
【sqlite权威指南】笔记1 概述
关系数据库,紧凑的可嵌入的,处理海量数据,支持c、java、Perl、PHP、Python、ruby、tcl等,作为产品组件嵌入到应用程序中本书主要内容:将sqlite部署为iphone或android的数据库引擎通过java、c++、PHP等与sqlite交互利用主键约束和外键约束,设计健壮的数据...
分类:数据库   时间:2015-05-22 13:09:40    阅读次数:146
网站架构模式
为了使网站在高访问量、处理海量数据时可以稳定并以高效率运行,需要对网站架构进行系统的设计,从而实现网站高性能、易伸缩、可扩展、安全等各种技术目标。网站的架构模式是大型网站在小型网站演变时期总结的一些对于相同问题的解决办法、称之为架构模式。 下方主要是概念性的理解,具体操作在对各技术详细解释文档中。 (总共9点)   1.软件结构分层 概念:将系统在横向维度上切分为几个部分,每个部分负责一...
分类:Web程序   时间:2015-05-11 09:06:31    阅读次数:129
k-means聚类学习
4.1、摘要 在前面的文章中,介绍了三种常见的分类算法。分类作为一种监督学习方法,要求必须事先明确知道各个类别的信息,并且断言所有待分类项都有一个类别与之对应。但是很多时候上述条件得不到满足,尤其是在处理海量数据的时候,如果通过预处理使得数据满足分类算法的要求,则代价非常大,这时候可以考虑使用聚类算...
分类:其他好文   时间:2015-05-06 13:09:17    阅读次数:106
黑马程序员__Java概述
------http://www.itheima.com" target="blank">Java培训、Android培训、iOS培训、.Net培训、期待与您交流! ------- 1 计算机概述 计算机(Computer)全称:电子计算机,俗称电脑。是一种能够按照程序运行,自动、高速处理海量数据的现代化智能电 子设备。由硬件和软件所组成,没有安装任何软件的计算机称为裸机。常...
分类:编程语言   时间:2015-05-05 08:58:27    阅读次数:177
黑马程序员_JavaSE学习总结第01天_Java概述
------- android培训、java培训、期待与您交流! ----------01.01 计算机概述计算机(Computer):全称电子计算机,俗称电脑。是一种能够按照程序运行,自动、高速处理海量数据的现代化智能电子设备。由硬件和软件所组成,没有安装任何软件的计算机称为裸机。常见的形式有台式...
分类:编程语言   时间:2015-04-22 20:37:40    阅读次数:215
Hadoop学习笔记系列文章导游【持续更新中...】
一、为何要学习Hadoop? 这是一个信息爆炸的时代。经过数十年的积累,很多企业都聚集了大量的数据。这些数据也是企业的核心财富之一,怎样从累积的数据里寻找价值,变废为宝炼数成金成为当务之急。但数据增长的速度往往比cpu和内存性能增长的速度还要快得多。要处理海量数据,如果求助于昂贵的专用主机甚至超级....
分类:其他好文   时间:2015-04-20 01:44:41    阅读次数:140
186条   上一页 1 ... 13 14 15 16 17 ... 19 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!