[toc] 一、部署Hadoop本地模式 1. 搭建linux环境 我用的centos7 2. 在/opt目录下创建目录 3. 安装jdk 4. 下载hadoop https://hadoop.apache.org/releases.html 并解压到/opt/module目录 5. 配置hadoo ...
分类:
其他好文 时间:
2020-05-24 23:42:50
阅读次数:
64
分布式部署 前期方案:web服务器(1台) + 阿里云mysql数据库(2节点) + uploads文件转移到oss文件服务器(先不删除服务器上文件)最终方案:web服务器(多台) + 阿里云mysql数据库(4+节点) + 阿里云Elasticsearch(多节点) + 阿里云Logstash分布 ...
分类:
其他好文 时间:
2020-05-18 12:34:55
阅读次数:
76
1.数据库架构演变 DAL是数据访问层的英文缩写,即为数据访问层(Data Access Layer)。其功能主要是负责数据库的访问。 在项目实际开发过程,有的直接采用JDBC技术进行数据库持久化操作,有的采用目前很好用的ORM框架来进行数据库持久化操作。 ORM耦合度较高 mysql 单表可支持5 ...
分类:
其他好文 时间:
2020-05-15 21:46:39
阅读次数:
80
面向服务的架构(SOA)是一个组件模型,它将应用程序的不同功能单元(称为服务)进行拆分,并通过这些服务之间定义良好的接口和契约联系起来。接口是采用中立的方式进行定义的,它应该独立于实现服务的硬件平台、操作系统和编程语言。这使得构建在各种各样的系统中的服务可以以一种统一和通用的方式进行交互。 面向服务 ...
分类:
其他好文 时间:
2020-05-15 19:58:36
阅读次数:
87
分布式唯一ID 一、逻辑要求 1. 全局唯一:相同业务和不同业务id都要保证不重复,以满足分布式部署、弹性伸缩、数据治理、追溯等要求。 2. 趋势递增:需要对BTree数据结构友好,保证查询性能。 3. 单调递增:在相同业务内保证后生成的id一定比先生成的大,满足事务版本号、IM实时消息、排序等要求 ...
分类:
其他好文 时间:
2020-05-14 12:49:23
阅读次数:
86
[toc] 高可用分布式对象存储,MinIO 轻松实现。 1 前言 "上一篇文章" 介绍了使用对象存储工具 MinIO 搭建一个优雅、简单、功能完备的静态资源服务,可见其操作简单,功能完备。但由于是单节点部署,难免会出现单点故障,无法做到服务的高可用。MinIO 已经提供了分布式部署的解决方案,实现 ...
分类:
其他好文 时间:
2020-05-01 00:59:14
阅读次数:
280
本文转自:http://www.hollischuang.com/archives/1716 目前几乎很多大型网站及应用都是分布式部署的,分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性(Consistency)、可用性(Ava ...
分类:
其他好文 时间:
2020-03-30 13:19:03
阅读次数:
61
1、tomcat分布式部署 1.1、要配置几个tomcat,就部署几个相同程序名的tomcat 1.2、配置每个tomcat下server.xml中ajp端口,以及后面的jvmRoute,第几个就配置成tomcat几,比如jvmRoute=”tomcat1” 1.3、配置apache中conf/wo ...
分类:
Web程序 时间:
2020-03-19 17:50:48
阅读次数:
80
原文转自:https://www.cnblogs.com/whitewasher/p/6946207.html Jmeter分布式部署测试 远程连接多台电脑做压力性能测试 在使用Jmeter进行接口的性能测试时,由于Jmeter 是JAVA应用,对于CPU和内存的消耗比较大,所以,当需要模拟数以万计 ...
分类:
其他好文 时间:
2020-03-14 10:38:04
阅读次数:
50
1.准备两台虚拟机,配置hosts文件 vim /etc/hosts 加入两台虚拟机的ip 和主机名(两台分别都要配置) 2.配置ssh免密通信 ssh-keygen ssh-copy-id 主机名 ssh 主机名(测试是否免密成功 3.配置hdfs-site.xfs文件 <configuratio ...
分类:
其他好文 时间:
2020-02-25 19:52:10
阅读次数:
51