一、需求分析 1、需求 手机号136、137、138、139开头都分别放到一个独立的4个文件中,其它开头的放到一个文件中 2、分析 a、分区 继承 Partitioner b、排序 实现 WritableComparable 二、具体代码(结合上篇博客) 1、自定义Haoop序列化类、排序 pack ...
分类:
编程语言 时间:
2020-09-17 16:58:35
阅读次数:
26
基于NIO、NIO2、APR的http链接器支持的属性 属性 描述 默认值 acceptCount 当所有请求处理线程均被占用,等待请求队列的最大长度。当队列填满时,接收到的任何请求均会被拒绝 100 acceptorThreadCount 接收连接的线程数。对于多核服务器或者当前存在过多的非kee ...
分类:
Web程序 时间:
2020-09-17 16:03:53
阅读次数:
31
APR作用 Tomcat可以使用APR来提供超强的可伸缩性和性能,更好地集成本地服务器技术。 APR(Apache Portable Runtime)是一个高可移植库,它是Apache HTTP Server 2.x的核心。 APR有很多用途,包括访问高级IO功能(例如sendfile,epoll和 ...
分类:
其他好文 时间:
2020-09-17 15:53:49
阅读次数:
27
mac上本来安装了php7.1版本,后来安装了node,结果再次执行php的时候,出现错误 dyld: Library not loaded: /usr/local/opt/icu4c/lib/libicui18n.63.dylib Referenced from: /usr/local/opt/p ...
分类:
Web程序 时间:
2020-09-14 19:18:32
阅读次数:
81
一、虚拟主机 #虚拟主机配置方式: 1.基于多IP的方式 2.基于多端口的方式 3.基于多域名的方式 1.基于多IP的方式 1)第一个配置文件 [root@web02 /etc/nginx/conf.d]# vim mali.conf server { listen 10.0.0.8:80; ser ...
分类:
其他好文 时间:
2020-09-12 21:27:25
阅读次数:
42
1.hive本身对union这样的命令进行了优化 2.hdfs数据本地化率对hive性能产生影响 在数据大小一定的情况下,500个128M的文件和2个30G的文件 跑hive任务,性能是有差异的,两者最大的区别在于,后者在读取文件时,需要跨网络传输,而前者为本地读写。数据本地化率问题。 3.不同数据 ...
分类:
其他好文 时间:
2020-09-09 19:07:41
阅读次数:
34
本文为翻译英文BLOG《Coping with the TCP TIME-WAIT state on busy Linux servers》,(http://vincent.bernat.im/en/blog/2014-tcp-time-wait-state-linux.html)但并非完整的翻译, ...
分类:
Web程序 时间:
2020-08-28 11:44:44
阅读次数:
59
程序员经常要面临的一个问题就是:如何提高程序性能?这篇文章,我们循序渐进,从内存、磁盘I/O、网络I/O、CPU、缓存、架构、算法等多层次递进,串联起高性能开发十大必须掌握的核心技术。I/O优化:零拷贝技术I/O优化:多路复用技术线程池技术无锁编程技术进程间通信技术RPC&&序列化技术数据库索引技术缓存技术&&布隆过滤器全文搜索技术负载均衡技术准备好了吗,坐稳了,发
分类:
其他好文 时间:
2020-08-24 16:28:12
阅读次数:
61
1、 隐层版本信息(1) 隐藏HTTP 头部的版本信息(2) 隐藏404页面出现的版本号2、 Tomcat 中的三种运行模式之运行模式的优化 Tomcat支持三种接收请求的处理方式:BIO、NIO、APR 。(1) BIO(Blocking IO,阻塞式): 阻塞式I/O操作即使用的是传统 I/O操 ...
分类:
其他好文 时间:
2020-08-08 00:31:43
阅读次数:
53
图片服务器目录:一:项目背景:我们平常写博客或者github,本质上是往文章中放了一个url,这个链接对应的资源在另一个服务器上。而我们这个项目就是实现这样一个服务器,可以存储和展示我们的珍贵相片。二:开发环境:操作系统:windows10开发工具:IDEA专业版web服务器:Tomcat8.5.51JDK:java1.8三:图片功能:服务器有上传图片,展示图片,删除图片,查询图片,并且实现一个简
分类:
其他好文 时间:
2020-08-02 10:12:32
阅读次数:
158