使用 Samba 或 NFS 实现文件共享 --Samba 文件共享服务；--NFS（网络文件系统）；--autofs 自动挂载服务。 1 Samba 文件共享服务Samba 服务程序现在已经成为在 Linux 系统与 Windows系统之间共享文件的最佳选择。安装 [root@iscsi ~]# ...
分类：
系统相关 时间：
2020-07-29 17:49:33
阅读次数：
102
前言 笔者最近解决了一个困扰了业务系统很久的问题。这个问题只在发布时出现，每次只影响一两次调用，相较于其它的问题来说，这个问题有点不够受重视。由于种种原因，使得这个问题到了业务必须解决的程度，于是就到了笔者的手上。 问题现场 我们采用的是dubbo服务，这是个稳定成熟的RPC框架。但是我们在某些应用 ...
分类：
其他好文 时间：
2020-07-29 15:39:57
阅读次数：
74
一、HDFS-HA集群配置 1.环境准备 1. 修改IP 2. 修改主机名及主机名和IP地址的映射 3. 关闭防火墙 4. ssh免密登录 5. 安装JDK，配置环境变量等 2.规划集群 hadoop102 hadoop103 hadoop104 NameNode NameNode JournalN ...
分类：
其他好文 时间：
2020-07-28 22:19:09
阅读次数：
77
sudo -i su 切换root用户 sudo -i su cdo 切换cdo用户 ps -ef | grep recommend 查看recommend进程pid netstat -nap | grep 查看进程监听端口号 jps 查看Java工程的进程pid pwd 查看当前工作目录 df - ...
分类：
系统相关 时间：
2020-07-28 17:02:30
阅读次数：
80
小爬最近的一个需求是：将windows系统下的打印任务批量有序给到网络打印机。 用户先从公司的OA(B/S模式)系统下 打印指定内容的表单以及表单中的附件内容。这个问题可以这样分解： 1、抓包，得到OA对应的任务接口，然后利用python requests模拟post请求，获取所有的表单的URL并进 ...
测试代码Github地址：https://github.com/zhouyanger/java_demo/tree/master/netty 五．自定义 RPC 5.1 概述 RPC（Remote Procedure Call)，即远程过程调用，它是一种通过网络从远程计算机程序 上请求服务，而不需要 ...
分类：
其他好文 时间：
2020-07-28 13:58:23
阅读次数：
69
客户端处理过程中调用Clientstub（就像调用本地方法一样），传递参数；Clientstub将参数编组为消息，然后通过系统调用向服务端发送消息；客户端本地操作系统将消息从客户端机器发送到服务端机器；服务端操作系统将接收到的数据包传递给Serverstub;Serverstub解组消息为参数；Serverstub在调用服务端的过程，过程执行结果以反方向的相同步骤响应给客户端。1.3RPC流程中需
分类：
其他好文 时间：
2020-07-28 10:22:10
阅读次数：
79
一、简介 在每个节点（driver和executor）上运行的管理器，该接口提供用于在本地和远程将block放置和检索到各种存储（内存，磁盘和堆外）的接口。 二、源码 private[spark] class BlockManager( executorId: String, rpcEnv: Rpc ...
分类：
其他好文 时间：
2020-07-27 23:41:12
阅读次数：
73
rm删目录的时候报错： .nfs8b65f38121ce6cf0004cf28f': Device or resource busy 解决方法： lsof .nfs8b65f38121ce6cf0004cf28f kill -9 78742 报错解决 ...
分类：
其他好文 时间：
2020-07-27 16:04:28
阅读次数：
134
1.centos的演变 1.1启动流程sysvinit 串行启动：一次一个，一个一个启动 并行启动：全部的一起启动 init优点 运行非常良好。主要依赖于shell脚本 init缺点 1、启动慢 2、容易夯住，fstab与nfs挂载问题 1.2upstart 技术 使用的版本： centos6 ub ...
分类：
其他好文 时间：
2020-07-27 15:59:50
阅读次数：
77
