码迷,mamicode.com
首页 >  
搜索关键字:数据架构    ( 244个结果
大数据架构:flume-ng+Kafka+Storm+HDFS 实时系统组合
个人观点:大数据我们都知道hadoop,但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理,hadoop还是比较适合的,但是对于实 时性比较强的,数据量比较大的,我们可以采用Storm,那么Storm和什么技术搭配,才能够做一个适合自己的项目。下面给大家可以参考。可以带着下面问题来阅读...
分类:Web程序   时间:2015-08-27 18:32:29    阅读次数:302
MongoDB---性能优化---(1)
MONGODB数据架构升级解决.计划发现问题应用server用户数的突然涌入,创建server反应慢检查server,我发现,每次反应非常慢,至30ops检查过程.发现数据库查询缓慢.检查索引.检查内存占.用量.检查TCP连接对照測试1.硬件配置:.client:.阿.里云,2cpu,2g内存。wi...
分类:数据库   时间:2015-08-19 10:48:58    阅读次数:173
业务系统的源代码阅读
本文总结业务系统的源代码阅读方法。数据是业务系统的核心。规则是业务系统的外延。“数据+规则” 构成了业务系统的整体视图。 技术上主要是数据架构设计、并发控制、事务管理和系统中间件。
分类:其他好文   时间:2015-08-17 21:08:57    阅读次数:152
【大数据架构】3. kafka安装与使用
1.kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据 Step 1: Download the code Download the 0.8.2.0 release and un-tar it. > tar -xzf kafka_2.10-0.8.2.0.tgz > cd kafka_2.10-0.8.2.0 Ste...
分类:其他好文   时间:2015-08-16 12:23:45    阅读次数:179
大数据架构:flume-ng+Kafka+Storm+HDFS 实时系统组合
http://www.aboutyun.com/thread-6855-1-1.html个人观点:大数据我们都知道hadoop,但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理,hadoop还是比较适合的,但是对于实 时性比较强的,数据量比较大的,我们可以采用Storm,那么Stor...
分类:Web程序   时间:2015-08-14 11:27:12    阅读次数:220
memcached小结--【项目经验】
为什么要用memcached? 每个技术的出现必然有它出现的原因,为啥要用memcached?查了一下网上的资料,了解到Memcache的出现解决了数据库高并发访问的瓶颈。当数据架构建立在单数据库模式,数据库连接池峰值达500,程序离崩溃就不远了。有的小网站开发的时候没有关注性能,等用户访问量越来越大,程序很容易崩溃。 如果客户端发送一个请求,服务端从数据库中存取相关数据,花费高昂。如果每次都从数据库取相同的数据,造成了数据库低效。然而如果把第一次取出的数据都存入到内存中,下次读取直接从...
分类:系统相关   时间:2015-08-05 22:16:59    阅读次数:185
Entity Framework 学习总结之一:ADO.NET 实体框架概述
ADO.NET 实体框架概述新版本中的 ADO.NET 以新实体框架为特色。它使开发人员可以通过对象模型(而不是逻辑/关系数据模型)专注于数据。实体框架有助于将逻辑数据架构抽象为概念模型,并且允许以多种方式通过对象服务和名为“EntityClient”的新数据提供程序与概念模型交互。实体框架使用概念...
分类:Web程序   时间:2015-07-31 12:48:45    阅读次数:152
大数据架构:flume-ng+Kafka+Storm+HDFS 实时系统组合
做软件开发的都知道模块化思想,这样设计的原因有两方面: 一方面是可以模块化,功能划分更加清晰,从“数据采集--数据接入--流失计算--数据输出/存储” ? 1).数据采集 负责从各节点上实时采集数据,选用cloud...
分类:Web程序   时间:2015-07-27 21:13:48    阅读次数:185
后Hadoop时代的大数据架构(转)
原文:http://zhuanlan.zhihu.com/donglaoshi/19962491 作者: 董飞 提到大数据分析平台,不得不说Hadoop系统,Hadoop到现在也超过10年的历史了,很多东西发生了变化,版本也从0.x 进化到目前的2.6版本。我把2012年后定义成后Hadoop平台时...
分类:其他好文   时间:2015-07-13 15:29:12    阅读次数:92
教务考试系统的总结
教务考试系统的总结         教务考试过去不久,也经历了好几次,经过许许多多的师哥师姐以及同学们的努力建 立、调试、测试、监考,还经过头脑风暴的交流以及总结,下面做一些文字的小结,在 以后我们自己做系统是自己能做到更好:                                    一、考试系统本身: 1、界面 (1)英语听力界面进度条看不见,...
分类:其他好文   时间:2015-07-08 22:36:44    阅读次数:187
244条   上一页 1 ... 18 19 20 21 22 ... 25 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!