对于多并发实时数据的服务器，需要考虑的一些策略，使负载能在不同的服务器进程中异步处理，含有当机恢复服务器进程数据，动态维护服务器进程，提高数据读写的速度。 其中的一些策略如下：...
分类：
其他好文 时间：
2015-03-31 10:51:21
阅读次数：
93
最近在组内作了次简单的分享，题目是实时数据流的处理，切入点主要是推荐系统中多种实时数据流的实时计算问题，当然像搜索的trends， 广告的实时计费等也可能会碰到类似的问题，PPT里面简单的介绍了下线上系统实际的结构和流程，系统上线运行近半年多，虽然没有出现过问题，其中有些问题还是值得修改和改善的，如果有业务相关的需求，这些问题会一并改善。
主要处理的问题：
1. 乱序的问题，这个在多数...
分类：
其他好文 时间：
2015-03-29 16:34:56
阅读次数：
173
1、华丽的HTML5图表 可展示实时数据HTML5在图表应用中也十分广泛，比起以前的网页图表，HTML5图表制作更便捷，功能更强大。这款HTML5图表插件外观十分华丽和专业，在数据展示方面也很有优势，图表不仅支持多维数据展示，而且支持区域选择数据功能，利用该HTML5图表可以更加方便地管理你的数据。...
分类：
Web程序 时间：
2015-03-12 09:46:34
阅读次数：
229
http://www.importnew.com/10712.html本文由 ImportNew - 踏雁寻花 翻译自 javacodegeeks。欢迎加入翻译小组。转载请见文末要求。我最近要处理一套存储历史实时数据的大文件fx market data，我很快便意识到，使用传统的InputStrea...
分类：
编程语言 时间：
2015-03-10 00:11:36
阅读次数：
155
eBay已经开源了一种实时大数据分析的平台—— Pulsar，它利用了分布式处理和Complex Event Processing技术，实现了一个低延迟，高可靠的分布式实时分析平台。...
分类：
其他好文 时间：
2015-03-02 14:55:20
阅读次数：
793
倘若数据库中的数据是实时更新的，而我们研究评估所用的报表也是要基于这样的实时数据，这时候我们就可以采用SQL Server Reporting Services（SSRS）服务。一个比较浅显的应用场景是，我们需要观察最近一天、一周或者一月的销售数据KPI并与上一个周期做比较得到相应的表格或图形，而恰好实时的销售数据都会进入到数据库中。这样做的好处是，对于这种功能需求一样，只是输入参数随时间而变化的报...
分类：
数据库 时间：
2015-02-27 17:10:04
阅读次数：
209
1.概述 Hadoop已被公认为大数据分析领域无可争辩的王者，它专注与批处理。这种模型对许多情形（比如：为网页建立索引）已经足够，但还存在其他一些使用模型，它们需要来自高度动态的来源的实时信息。为了解决这个问题，就得借助Twitter推出得Storm。Storm不处理静态数据，但它处理预计会连续.....
分类：
其他好文 时间：
2015-02-13 16:24:58
阅读次数：
144
keyvalue键值数据库内存中心化设计内存中心化设计是一种进来十分流行的架构，用于解决web2.0时代数据大量读写带来的性能压力。实现思路：增加缓冲层，利用内存的高I/O性能将大量的实时数据以key_value的形式在内存中处理通过预读和合并写入等技术减少后端数据库的IO压力key-val..
分类：
数据库 时间：
2015-02-10 11:30:09
阅读次数：
199
中国大数据技术大会首日全体大会上，腾讯数据平台部助理总经理蒋杰发表了题为《大数据处理的规模化与实时化演进 》的演讲。他分享了大数据技术在腾讯的实践，其中包括基于Hadoop的平台TDW、实时数据收集系统TDBank以及基于Storm的流处理系统TRC。同时，蒋杰还透露，腾讯将在12月开源内部的Had...
分类：
其他好文 时间：
2015-02-09 12:47:57
阅读次数：
177
mongodb支持array类型
在group的功能方面，mongodb确实不错。对于复杂的数据处理用mapreduce，但是这个玩意很慢，比较适合脚本处理数据，不适合实时数据查询
在实时数据处理方面得用管道，关于管道语法方面，参看：
http://blog.csdn.net/terry_water/article/details/43529367
如果$class_artist是数组，需...
分类：
数据库 时间：
2015-02-05 16:23:18
阅读次数：
186
