一、iSCSI发现和多路径设备设置 1、启用软件iSCSI 2、设置发起方名称 如果“名称和别名”部分中的启动器名称与gwcli设置期间创建客户端时使用的名称不同，或与ansible client_connections客户端变量中使用的启动器名称不同，则SSH到ESX主机并运行以下esxcli命令 ...
分类：
系统相关 时间：
2020-09-04 17:02:10
阅读次数：
90
1 Sqoop概述 传统的应用程序管理系统，即应用程序与使用RDBMS的关系数据库的交互，是产生大数据的来源之一。由RDBMS生成的这种大数据存储在关系数据库结构中的关系数据库服务器中。 当大数据存储和Hadoop生态系统的MapReduce，Hive，HBase，Cassandra，Pig等分析器 ...
分类：
其他好文 时间：
2020-09-03 16:44:55
阅读次数：
40
Block是文件块，HDFS中是以Block为单位进行文件的管理的，一个文件可能有多个块，每个块默认是3个副本，这些块分别存储在不同机器上。块与文件之前的映射关系会定时上报Namenode。HDFS中一个块的默认大小是64M，其大小由参数dfs.block.size控制。这里面先引申几个问题出来： ...
分类：
其他好文 时间：
2020-09-03 16:43:21
阅读次数：
40
目前在devops的开发中,使用频繁的是sonar,jira,jenkins,ansible,artifactory,nexus等,目前公司对单元测试做了强要求,单元测试的覆盖率要达到35以上,我们自己组内今年的目标,单元测试的覆盖率是要达到70%左右,这个对我们来说都是一个很大的挑战啊.下面来说说单测的重要性吧,自己原来是不怎么写单测的,注释关注业务功能的开发,可能对单元测试不是很看中,觉得没什
分类：
其他好文 时间：
2020-08-20 18:31:45
阅读次数：
64
服务器信息类型服务器IP地址备注Ansible(2台)172.24.78.21/22K8S集群部署服务器，可以和在一起，需要配置在负载均衡上实现反向代理，dashboard的端口为8443K8SMaster(2台)172.24.78.21/22K8s控制端，通过一个VIP做主备高可用Harbor(2台)172.24.78.23/24高可用镜像服务器Etcd(最少3台)172.24.78.25/26
分类：
其他好文 时间：
2020-08-20 18:13:33
阅读次数：
68
1.ansible命令集ansible:定义并运行简单任务。ansible-config:查看、编辑、管理ansible配置。ansible-doc:文档查看工具。ansible-galaxy:共享和下载roles的工具。ansible-inventory:查看inventory的信息。ansible-playbook:执行playbook。ansible-pull:从仓库中拉去playbook。
分类：
其他好文 时间：
2020-08-19 20:09:27
阅读次数：
115
1.ansibleplaybook介绍playbook是ansible用于配置，部署，和管理被控节点的剧本。通过playbook的详细描述，执行其中的一系列tasks，可以让远端主机达到预期的状态。playbook就像Ansible控制器给被控节点列出的的一系列to-do-list，而被控节点必须要完成。也可以这么理解，playbook字面意思，即剧本，现实中由演员按照剧本表演，在Ansible中
分类：
其他好文 时间：
2020-08-19 20:09:01
阅读次数：
137
有时需要对yaml文件中的某些敏感字段进行加密，这时就需要‘ansible-vault encrypt_string ’加密字符串，在使用过程中发现报错：Vault format unhexlify error: Odd-length string fatal，使用ansible-lint工具进行调试排查错误，本文记录了在使用过程中报错及解决的详细过程。
分类：
其他好文 时间：
2020-08-19 20:00:36
阅读次数：
66
服役新的节点 1、首先克隆一个新的虚拟机，里面的hadoop等环境都配好了 之后修改ip通过 root进行登录，在原本好的虚拟机上进行分发操作 之后再发java 发环境变量 在新的虚拟机上进行： 这是重新运行环境变量 之后进入hadoop删除data和logs让他变成一个全新的机器 就会发现 dat ...
分类：
其他好文 时间：
2020-08-19 19:07:03
阅读次数：
65
####首先保证Node891或Node811等版本装成功了###### /opt/bigdata/elk/node891 ################ 修改目录权限 #################### [root@vwmaster hadoop]# chown -R root:root ...
分类：
其他好文 时间：
2020-08-17 17:45:14
阅读次数：
70
