电竞出现在人们视野中的频率越来越高了，此次选取FunData作为电竞数据平台，v1.0 beta版本主要提供由Valve公司出品的顶级MOBA类游戏DOTA2相关数据接口(详情：open.varena.com)。 本文将介绍FunData的架构演进中的设计思路及其涉及的相关技术，包括大数据流处理方案 ...
分类：
其他好文 时间：
2019-04-07 09:56:32
阅读次数：
153
分布式（Distributed）数据访问层（Data Access Layer），简称DAL，是利用MySQL Proxy、Memcached、集群等技术优点而构建的一个架构系统。主要目的是解决高并发、大数据流操作遇到的和数据访问有关的问题，例如怎么进行切库分表，怎样能够更好的防止服务单点故障等等。 ...
分类：
其他好文 时间：
2018-09-12 22:59:15
阅读次数：
257
通过这门课程，自己对于软件的认识更加深入。例如软件危机是指在计算机软件的开发和维护过程中所遇到的一系列严重问题。这些问题表现在以下几个方面： (1)用户对开发出的软件很难满意。 (2)软件产品的质量往往靠不住。 (3)一般软件很难维护。 (4)软件生产效率很低。 (5)软件开发成本越来越大。 (6) ...
分类：
其他好文 时间：
2018-06-14 20:56:37
阅读次数：
128
详解DPI与网络回溯分析技术 随着网络通讯技术进步与发展，网络通讯已跨入大数据时代，如何监控各类业务系统的通讯数据在大数据流量中传输质量，以及针对海量的网络通讯数据的范畴中存在少量的恶意流量的检测，避免恶意通讯对主机、网络设备的root权限的安全威胁，和通讯内容的窃取。是网络管理必须面对的一个难题。 ...
分类：
其他好文 时间：
2017-09-29 23:12:36
阅读次数：
461
处理实时的大数据流最常用的就是分布式计算系统，下面分别介绍Apache中处理大数据流的三大框架: Apache Storm 这是一个分布式实时大数据处理系统。Storm设计用于在容错和水平可扩展方法中处理大量数据。他是一个流数据框架，具有最高的社区率。虽然Storm是无状态的，它通过ApacheZo ...
分类：
Web程序 时间：
2017-08-02 13:02:57
阅读次数：
431
我们设计Kafka用来作为统一的平台来处理大公司可能拥有的所有实时数据源。为了做到这点，我们必须思考大量的使用场景。 它必须有高吞吐去支持大数据流，例如实时日志聚合。 它必须优雅的处理数据积压，以支持定期从离线系统加载数据。 这也以为这系统必须支持低延迟的分发来处理传统消息系统的场景。 ...
分类：
其他好文 时间：
2017-06-24 12:38:03
阅读次数：
178
如今互联网崛起的时代，各大网站都面临着一个大数据流问题，怎么提高网站访问速度，减少对数据库的操作；作为PHP开发人员，我们一般能想到的方法有页面静态化处理、防盗链、CDN内容分发加速访问、mysql数据库优化建立索引、架设apache服务器集群、还有就是现在流行的各种分布式缓存技术：如memcach ...
分类：
系统相关 时间：
2017-06-19 23:29:04
阅读次数：
255
帆软图表（新特性）最新版本的图表插件新增了甘特图与框架图两种图表类型，大大方便了生产管理所需，同时支持流向地图的大数据模式。一.甘特图甘特图又称任务计划进度图，其通常用来表示项目进展随着时间进度的变化。甘特图被广泛的应用在各行业的项目管理中，因此帆软在最新的..
分类：
其他好文 时间：
2017-05-04 23:08:41
阅读次数：
217
Serverless 架构旨在将应用开发者从底层基础设施的运维中解放出来，更加专注于业务价值的实现上,这种思想对于大数据应用尤其适用,数据科学家更需要投入到数据价值的探索和挖掘上。本文讲述了数据平台如何利用Serverless 的架构来降低大数据应用的门槛，真正的实现普惠大数据。 ...
分类：
其他好文 时间：
2017-03-17 17:55:18
阅读次数：
190
近些年，大数据流式处理的讨论热了起来，就在去年，阿里巴巴想apache基金会贡献了java语言版的Jstorm，那么？为什么现在企业会越来越关注大数据的流式处理呢？仅仅对大容量的离线数据分析挖掘，已经...
分类：
其他好文 时间：
2017-01-28 11:30:35
阅读次数：
262
