码迷,mamicode.com
首页 >  
搜索关键字:sqoop mysql hadoop    ( 106950个结果
cygwin
在windows下通过安装cygwin模拟linux环境,然后再安装hadoop,是一种简单方便的方式。为hadoop准备的windows下cygwin环境安装过程如下: - 下载安装文件 最新的cygwin安装文件setup.exe下载地址在这里:http://cygwin.com/install.html。用最新版本的cygwin就可以,我用的是2.774版本的安装程序。 - 安装cyg...
分类:Windows程序   时间:2014-05-05 13:10:02    阅读次数:536
基于Hadoop的数据分析综合管理平台之Hadoop、HBase完全分布式集群搭建
能够将热爱的技术应用于实际生活生产中,是做技术人员向往和乐之不疲的事。            现将前期手里面的一个项目做一个大致的总结,与大家一起分享、交流、进步。项目现在正在线上运行,项目名——基于Hadoop的数据分析综合管理平台。                                 项目流程整体比较清晰,爬取数据(txt文本)-->数据清洗-->文本模型训练-->文本分类-...
分类:其他好文   时间:2014-05-04 00:22:05    阅读次数:476
ORM框架-VB/C#.Net实体代码生成工具(EntitysCodeGenerate)【ECG】4.6
VB/C#.Net实体代码生成工具(EntitysCodeGenerate)【ECG】是一款专门为.Net数据库程序开发量身定做的(ORM框架)代码生成工具,所生成的程序代码基于OO、ADO.NET、分层架构、ORM及反射+工厂设计模式等。支持.Net1.1及以上版本,可用于Oracle、SqlServer、Sybase、DB2、MySQL、Access、SQLite、PostgreSQL、DM(达梦)、PowerDesigner文件、Informix、Firebird、MaxDB、Excel等和OleDb...
分类:Web程序   时间:2014-05-04 00:13:17    阅读次数:658
Hadoop 2.2 配置安装
centos 配置hadoop 2.2. 非常全面...
分类:其他好文   时间:2014-05-03 16:39:17    阅读次数:369
MySQL慢查询
看到这个名称我惊呆了... SQL不是希望快速查询取得结果吗,怎么什么时候会有这个概念。 问了一个哥们,哥们认为是漫查询:同时多查询。 于是Google得出了如下结果: 慢查询其实对应的是MySQL慢查询日志系统,用来记录执行比较慢的SQL。 怎么去判断执行慢呢,MySQL中你show variables like '%quer%';时,你可以看到long_query_time 属性,对应的就是设置的比较时间。 当看到long_query_time 属性时,你同时可以看到log_slow_queries状态...
分类:数据库   时间:2014-05-03 15:23:59    阅读次数:500
mariadb-10实现半同步复制及SSL安全复制
一、关于复制的相关问题1、异步复制解决了那些问题复制解决的基本问题是让一台服务器的数据和另外的服务器保持同步,可以位于不同的网络拓扑中,对整台服务器的特定的数据库,甚至特定的表进行复制。基于语句复制和基于行复制,都是通过记录主服务器的二进制日志,并在从服务器..
分类:数据库   时间:2014-05-03 15:17:52    阅读次数:486
Hadoop初学指南(8)--MapReduce中的Combiner操作
本文主要介绍了MapReduce中的Combiner操作。在MapReduce的执行步骤中,我们一共分了8步,其中Map中的最后一步规约操作就是今天要讲的Combiner。首先看一下前文中的计数器:我们可以发现,其中有两个计数器:Combineoutputrecords和Combineinputrecords,他们的计数都是0,这是..
分类:其他好文   时间:2014-05-03 15:00:55    阅读次数:323
Hadoop初学指南(7)--MapReduce自定义计数器
本文主要介绍了MapReduce中的自定义计数器的相关内容。在上次的单词统计例子中,我们可以看到MapReduce在执行过程中会有很多的控制台输出信息,其中有一个很关键的内容:计数器。如下图:可以看到最上方的关键字:Counters,这就表示计数器。在这里,只有一个制表符缩进的表示..
分类:其他好文   时间:2014-05-03 14:56:19    阅读次数:336
mysql的一主多从和双主浅析
一、主从一主多从时,主服务器上必须启用多个binlogdump线程,来对多个从服务器发起binlogeventdump,同时主服务器来得面临,前端众多客户端发起的写操作。主服务器压力很大,若挂了,从还能读不能写了,业务不能工作了,这样就催生了双主模型。双主模型下连上多个从也可以。但..
分类:数据库   时间:2014-05-03 14:44:43    阅读次数:394
HAProxy+KeepAlived实现web服务高可用、动静分离等
大致规划:主机IP描述VIP192.168.0.222对外提供高可用IPhaproxy+keepalived(node1)192.168.0.111haproxy为后端两台WEB服务的做动静分离;keepalived为haproxy做高可用。haproxy+keepalived(node2)192.168.0.112WEB(node3)192.168.0.113提供静态请求响应Apache+PHP+MySQL(node4)..
分类:Web程序   时间:2014-05-03 14:37:46    阅读次数:610
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!