yarn是什么: 旧版本MapReduce中的JobTracker/TaskTracker在可扩展性、内存消耗、可靠性和线程模型方面存在很多问题,需要开发者做很多调整来修复。 Hadoop的开发者对这些问题进行了Bug修复,可是由此带来的成本却越来越高,为了从根本上解决旧MapReduce存在的问题 ...
分类:
其他好文 时间:
2020-11-19 12:56:26
阅读次数:
17
1.选择nginx的理由(1)支持高并发;(官方5w并发,实测3w并发,因为采用epoll网络IO模型)(2)内存消耗少;(nginx+php-fcgi在3w并发下开启10个nginx进程,消耗150mb内存,64个nginx进程消耗内存1280mb)(3)成本低廉;(开源免费,可用于商业,相对硬件f5成本低)(4)节省带宽;(5)稳定高;(6)内置健康检查功能;(7)支持反向代理;(8)支持负载
分类:
其他好文 时间:
2020-11-18 13:12:21
阅读次数:
9
一、问题的提出询问框架组件,是否需要自研?18年规划系统介绍58到家的技术体系,15年加盟58到家后,架构部正好也是负责范围的一部分,故谈一谈自己的想法,个人观点:如果公司业务不复杂,研发人数比较少,技术实力相对有限,一定不要自研框架组件如果公司业务复杂,研发人数比较多,技术能力能够胜任,建议自研部分框架组件二、为什么早期不建议自研?早期研发人数较少,公司也不确定能走多远,业务相对简单,业务以“快
分类:
其他好文 时间:
2020-11-18 12:55:38
阅读次数:
10
尚硅谷大数据项目实战之在线教育(01数仓需求) (作者:尚硅谷大数据研发部) 版本:V1.0 第1章 数据仓库概念 数据仓库是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。 数据仓库是出于分析报告和决策支持目的而创建的,为需要业务智能的企业,提供指导业务流程改进、监控时间、成本、质量 ...
分类:
其他好文 时间:
2020-11-18 12:30:57
阅读次数:
5
VisualNet VisualNet 图形化的资源管理系统开发平台:适用于广电网络资源管理、光缆资源管理、通信资源管理、机房综合资源管理等。 基本信息 外文名 VisualNet 类 型 系统开发平台 适用范围 电网络资源管理、光缆资源管理等 特 点 把数据信息、对象关系用图形集成 VisualN ...
分类:
Web程序 时间:
2020-11-17 11:49:52
阅读次数:
14
程序员:如何客观的衡量业务想法?作者沈佳伟哔哩哔哩会员购架构师Z世代的程序员们随着Z世代的到来,程序员们越来越多的从原本单一的开发职责中走了出来,越来越多的参与到业务里。同时开始思考如何利用手中多样化的技术武器库为业务赋能,与业务互相成就。想到一个业务Idea并不困难,但衡量一个业务Idea值不值得去做却不那么容易。也许我们经常脑海中会蹦出「管他呢,先做再说」,也许有时候这种冲劲的确让你成功了一次
分类:
其他好文 时间:
2020-11-13 12:39:55
阅读次数:
5
Spotify技术升级的三步走策略技术升级易烂尾根据我们的经验,大规模的技术升级或迁移往往在开始的时候迅速推进,但随着时间的推移往往会陷入泥沼,最终导致大部分系统即使成功迁移,也还是会留下一些老版本的尾巴。就好比无人看管时花园里的杂草便会发芽长大,也是技术基础架构碎片化的原因之一。大约一年半前,我们开始在spotify正视这个问题。在这篇文章中,我们将分享我们的思路和方法,以及下一步将怎么做。多吃
分类:
其他好文 时间:
2020-11-13 12:39:30
阅读次数:
5
空间分析——题目2 容积率(Plot Ratio/Floor Area Ratio/Volume Fraction)又称建筑面积毛密度,是指一个小区的地上总建筑面积与用地面积的比率。对于开发商来说,容积率决定地价成本在房屋中占的比例,而对于住户来说,容积率直接涉及到居住的舒适度,按照下列要求,计算建 ...
分类:
其他好文 时间:
2020-11-12 13:48:25
阅读次数:
10
其实DDoS的核心问题是发起DDoS的成本很低,而防护的的成本非常高。我所了解的,今年国内应该出现了多起超过200G的ddos攻击。国内大部分公司都是扛不住的,当然一般没有深仇大恨或者巨大的商业目的不会发起如此规模的攻击。不过目前打挂一个普通网站有几个G就可以了,攻击成本只需要几百块,防护可能需要几 ...
分类:
其他好文 时间:
2020-11-10 11:43:06
阅读次数:
30
微博付费打赏架构:一个社交场景下准金融项目开发和实践导读:内容变现平台是当今互联网的一个风口,其背后都需要互联网金融的支持,上个月微博商业产品部联合小米支付、天弘基金等金融技术团队策划了首届互联网金融系统沙龙,围绕在互联网金融过程中碰到技术架构问题与业界展开分享及交流。本文是刘其秀在沙龙上的演讲,授权高可用架构发表。刘其秀,新浪微博技术leader,曾在金融界、赶集等公司担任架构设计和技术管理工作
分类:
其他好文 时间:
2020-11-08 17:36:09
阅读次数:
21