个人观点:大数据我们都知道hadoop,但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理,hadoop还是比较适合的,但是对于实 时性比较强的,数据量比较大的,我们可以采用Storm,那么Storm和什么技术搭配,才能够做一个适合自己的项目。下面给大家可以参考。可以带着下面问题来阅读...
分类:
Web程序 时间:
2015-08-27 18:32:29
阅读次数:
302
MONGODB数据架构升级解决.计划发现问题应用server用户数的突然涌入,创建server反应慢检查server,我发现,每次反应非常慢,至30ops检查过程.发现数据库查询缓慢.检查索引.检查内存占.用量.检查TCP连接对照測试1.硬件配置:.client:.阿.里云,2cpu,2g内存。wi...
分类:
数据库 时间:
2015-08-19 10:48:58
阅读次数:
173
本文总结业务系统的源代码阅读方法。数据是业务系统的核心。规则是业务系统的外延。“数据+规则” 构成了业务系统的整体视图。 技术上主要是数据架构设计、并发控制、事务管理和系统中间件。
分类:
其他好文 时间:
2015-08-17 21:08:57
阅读次数:
152
1.kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据
Step 1: Download the code
Download the
0.8.2.0 release and un-tar it.
> tar -xzf kafka_2.10-0.8.2.0.tgz
> cd kafka_2.10-0.8.2.0
Ste...
分类:
其他好文 时间:
2015-08-16 12:23:45
阅读次数:
179
http://www.aboutyun.com/thread-6855-1-1.html个人观点:大数据我们都知道hadoop,但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理,hadoop还是比较适合的,但是对于实 时性比较强的,数据量比较大的,我们可以采用Storm,那么Stor...
分类:
Web程序 时间:
2015-08-14 11:27:12
阅读次数:
220
为什么要用memcached?
每个技术的出现必然有它出现的原因,为啥要用memcached?查了一下网上的资料,了解到Memcache的出现解决了数据库高并发访问的瓶颈。当数据架构建立在单数据库模式,数据库连接池峰值达500,程序离崩溃就不远了。有的小网站开发的时候没有关注性能,等用户访问量越来越大,程序很容易崩溃。
如果客户端发送一个请求,服务端从数据库中存取相关数据,花费高昂。如果每次都从数据库取相同的数据,造成了数据库低效。然而如果把第一次取出的数据都存入到内存中,下次读取直接从...
分类:
系统相关 时间:
2015-08-05 22:16:59
阅读次数:
185
ADO.NET 实体框架概述新版本中的 ADO.NET 以新实体框架为特色。它使开发人员可以通过对象模型(而不是逻辑/关系数据模型)专注于数据。实体框架有助于将逻辑数据架构抽象为概念模型,并且允许以多种方式通过对象服务和名为“EntityClient”的新数据提供程序与概念模型交互。实体框架使用概念...
分类:
Web程序 时间:
2015-07-31 12:48:45
阅读次数:
152
做软件开发的都知道模块化思想,这样设计的原因有两方面: 一方面是可以模块化,功能划分更加清晰,从“数据采集--数据接入--流失计算--数据输出/存储” ? 1).数据采集 负责从各节点上实时采集数据,选用cloud...
分类:
Web程序 时间:
2015-07-27 21:13:48
阅读次数:
185
原文:http://zhuanlan.zhihu.com/donglaoshi/19962491 作者: 董飞 提到大数据分析平台,不得不说Hadoop系统,Hadoop到现在也超过10年的历史了,很多东西发生了变化,版本也从0.x 进化到目前的2.6版本。我把2012年后定义成后Hadoop平台时...
分类:
其他好文 时间:
2015-07-13 15:29:12
阅读次数:
92
教务考试系统的总结
教务考试过去不久,也经历了好几次,经过许许多多的师哥师姐以及同学们的努力建
立、调试、测试、监考,还经过头脑风暴的交流以及总结,下面做一些文字的小结,在
以后我们自己做系统是自己能做到更好:
一、考试系统本身:
1、界面
(1)英语听力界面进度条看不见,...
分类:
其他好文 时间:
2015-07-08 22:36:44
阅读次数:
187