如果现在要想将flume中的sink设置为kafka,因为在实际的开发中,可能会有若干个子系统或者若干个客户端进行flume日志采集,那么能够承受这种采集任务量的只有kafka来完成,可是需要注意一个问题,现在的kafka是采用了Kerberos认证,所以要想在flume之中去使用kafka操作,就 ...
分类:
Web程序 时间:
2020-07-03 01:11:20
阅读次数:
154
我们项目的结构图 通过使用Ngnix的路径转发,我们会自动将/api目录下的所有请求转发到后端 server { gzip on; gzip_min_length 1k; gzip_buffers 4 16k; gzip_comp_level 2; gzip_types text/plain app ...
分类:
其他好文 时间:
2020-07-02 11:54:53
阅读次数:
57
gzip配置的常用参数 gzip on|off; #是否开启gzip gzip_buffers 32 4K| 16 8K #缓冲(压缩在内存中缓冲几块? 每块多大?) gzip_comp_level [1-9] #推荐6 压缩级别(级别越高,压的越小,越浪费CPU计算资源) gzip_disable ...
分类:
Web程序 时间:
2020-06-24 16:04:51
阅读次数:
61
主要参考:http://tutorials.jenkov.com/java-nio/buffers.html 一、Java NIO Buffer Java NIO Buffers are used when interacting with NIO Channels. As you know, da ...
分类:
编程语言 时间:
2020-06-21 13:33:29
阅读次数:
51
总公司的某数据以文件存放在FTP服务器上,现将其移植到我本地的SQL服务器。 我已有连接pyodbc import pyodbcimport pandas as pdfrom ftplib import FTPimport sqlalchemy ip='XXX.XXX.XXX.XXX'port=21 ...
分类:
数据库 时间:
2020-06-21 10:12:44
阅读次数:
224
现在的程序使用单页面应用,因此程序会在一开始就会加载页面JS。如果带宽不够,那么会影响页面下载速度。 我们可以使用NGINX 进行压缩,加快文件下载。 gzip on; gzip_min_length 1k; gzip_buffers 4 16k; gzip_http_version 1.0; gz ...
分类:
其他好文 时间:
2020-06-19 15:56:19
阅读次数:
51
MTLFeatureSet_iOS_GPUFamily4_v2 A11 iphone8 iphone8pllus iphoneX https://developer.apple.com/documentation/metal/indirect_command_buffers/encoding_ind ...
分类:
其他好文 时间:
2020-06-16 18:04:21
阅读次数:
106
客户说数据库的CPU使用率为100%,应用相应迟缓。发现是latch: cache buffers chains 作祟故障分析思路 查看等待事件,判断故障起因 1 SQL>select * from (select sid,event,p1,p2,p3,p1text,WAIT_TIME,SECOND ...
分类:
系统相关 时间:
2020-06-15 18:04:23
阅读次数:
73
客户说数据库的CPU使用率为100%,应用相应迟缓。发现是latch: cache buffers chains 作祟故障分析思路 查看等待事件,判断故障起因 1 SQL>select * from (select sid,event,p1,p2,p3,p1text,WAIT_TIME,SECOND ...
分类:
系统相关 时间:
2020-06-15 17:36:04
阅读次数:
67
1.现象 当我们使用free命令查看内存的时候,发现可用物理内存很少,但是通过进程查看没有进程占用大内存。 [root@nexus-76150 ~]# free -h total used free shared buffers cached Mem: 15G 15G 193M 364K 1.0G ...
分类:
系统相关 时间:
2020-06-15 13:58:25
阅读次数:
142