大数据从入门到入土 语言基础:java(Java se,javaweb) Linux 基础:Linux(shell,高并发架构,lucene,solr) 框架学习:Hadoop(Hadoop,HDFS,Mapreduce,yarn,hive,hbase,sqoop,zookeeper,flume) ...
分类:
其他好文 时间:
2019-11-16 21:47:53
阅读次数:
107
随着消息应用中心(任务中心)的广泛应用,有时候我们会感受不到消息队列的存在,但这不影响消息队列在高可用、分布式、高并发架构下的核心地位。 一、消息队列的应用场景 二、消息队列的一些基本概念和简单原理 1. Broker Broker的概念来自与Apache ActiveMQ,通俗的讲就是MQ的服务器 ...
分类:
其他好文 时间:
2019-10-06 09:37:03
阅读次数:
100
一、c/s架构和b/s架构 c/s架构:客户端和服务器 eg:QQ、微信 c端 网络 s端 c端:就是客户端 s端:有固定IP,并且稳定一直在运行,支持高并发 b/s架构:浏览器和服务器 eg:京东、天猫 其实b/s架构的本质也是c/s架构 二、网络协议 什么是网络? 网络就是网络连接介质+网络协议 ...
分类:
其他好文 时间:
2019-09-16 19:44:49
阅读次数:
144
需求由来 1.Redis高并发的问题 Redis缓存的高性能有目共睹,应用的场景也是非常广泛,但是在高并发的场景下,也会出现问题:缓存击穿、缓存雪崩、缓存和数据一致性,以及今天要谈到的缓存并发竞争。 这里的并发指的是多个redis的client同时set key引起的并发问题。 2.出现并发设置Ke ...
分类:
其他好文 时间:
2019-09-04 09:41:45
阅读次数:
94
转发:https://blog.csdn.net/beihenanfei/article/details/78919682 #高并发架构相关概念# 并发: 在操作系统中,是指一个时间段中有几个程序都处于已启动运行到运行完毕之间,且这几个程序都是在同一个处理机上运行,但任意一个时刻上只有一个程序在处理 ...
分类:
其他好文 时间:
2019-08-20 00:37:28
阅读次数:
72
Zookeeper是分布式一致性问题的工业解决方案,是Apache Hadoop下解决分布式一致性的一个组件,后被分离出来成为Apache的顶级项目。 工程来源:是雅虎公司内部项目,据说雅虎内部很多项目都是以动物命名,这个动物管理员的名字起的很是形象。 被开源出来后得到开源社区的快速推进,服务端Ja ...
分类:
其他好文 时间:
2019-08-04 16:45:16
阅读次数:
96
redis主从架构 -> 读写分离架构 -> 可支持水平扩展的读高并发架构 redis replication的核心机制 (1)redis采用异步方式复制数据到slave节点,不过redis 2.8开始,slave node会周期性地确认自己每次复制的数据量 (2)一个master node是可以配 ...
分类:
其他好文 时间:
2019-07-04 14:33:16
阅读次数:
119
转:https://www.cnblogs.com/afee666/p/6930181.html 一、什么是高并发 高并发(High Concurrency)是互联网分布式系统架构设计中必须考虑的因素之一,它通常是指,通过设计保证系统能够同时并行处理很多请求。 高并发相关常用的一些指标有响应时间(R ...
分类:
其他好文 时间:
2019-06-19 22:07:36
阅读次数:
156
人大:第13讲市面上主流的分布式文件系统(FS):(Hadoop的)HDFS,(Google的)GFS数据服务与键值对数据库:数据服务:data serving 数据服务:数据的简单读写 数据库事务:也算一种数据服务,但属于mission-critical,较为复杂的数据服务数据服务起源:优化布局日 ...
分类:
数据库 时间:
2019-06-09 00:43:45
阅读次数:
136
伴随消费新理念的不断升级和技术创新发展,零售业逐渐被推到风口浪尖,对此京东曾表示,推动“无界零售”时代的到来理念,倡导实现成本、效率、体验的升级才是终极目标。 此概念一出,零售行业的侧重点开始由销售端向技术端倾斜, 趁着一年一度618来临之际,京东云特别在上海举办了主题为"从高并发架构到企业级区块链 ...
分类:
其他好文 时间:
2019-06-06 19:07:53
阅读次数:
100