1 背景近年来,企业的各项业务发展迅猛,客户数目不断增加,后台服务系统压力也越来越大,系统的各项硬件资源也变得非常紧张。因此,在技术风险可控的基础上,希望引入大数据技术,利用大数据技术优化现有IT系统实现升级改造,搭建一个统一存储和管理历史、近线数据的服务平台,同时能够对外支持高并发、低延时的数据查 ...
分类:
数据库 时间:
2019-10-31 16:07:05
阅读次数:
108
公务员在许多人的眼里是“铁饭碗”,每当看到身边有人考上了公务员就羡慕无比,认为只要成为了公务员,一生会衣食无忧,幸福感很强,不用担心被炒掉!正因如此,才被民间称为“铁饭碗”。众所周知,公务员考试竞争已经非常激烈了,很多朋友都是冲着稳定去的,并且公务员竞争还会越来越大,为什么?因为新公务员法6月开始实 ...
分类:
其他好文 时间:
2019-10-30 18:12:09
阅读次数:
109
一般情况下,采用gitlab作为版本管理工具,内网环境需要搭建gitlab服务器,安装好gitlab应用之后,就开始使用,但是随着时间的推移,发现gitlab的repository会越来越大。一般,从运维角度而言,都会为gitlab的repository提供单独的存储控件,下面就开始进行目录迁移处理 ...
分类:
其他好文 时间:
2019-10-30 18:05:17
阅读次数:
382
图片来源@全景网 我们身处数据大爆炸的时期,想必没人会质疑这一点。网络用户规模越来越大,由此产生的访问数据也在指数倍增长,最典型的,每逢大型年度购物节、流量明星出轨、春晚抢红包等特殊事件,都如同一场服务器系统性能的“极限挑战”,某几家互联网公司总会被拉出来示众,成则顶礼膜拜,败则集体吐槽。 如何在极 ...
分类:
其他好文 时间:
2019-10-29 19:59:12
阅读次数:
79
0x00 事件 Harbor 私有仓库中占有的存储慢慢越来越大,使用官方的清理工具以及 UI 上的垃圾清理,都似乎也不能清理掉…… 后来吾用了一种简单粗暴的方法清理镜像——删除 harbor registry 0x01 处理 此方法只会删除掉仓库内的所有镜像,不会删除在 Harbor UI 上看到的 ...
分类:
其他好文 时间:
2019-10-29 13:27:41
阅读次数:
659
背景 现在我们的数据量越来越来越大,往往会有短时间渲染大量数据的要求,但是往往这些数据过大难以实时处理,整体切片花费时间又过长。在这里提出一种缓存加实时处理的方案。 准备 软件环境,PostGIS(3.0 ...
分类:
其他好文 时间:
2019-10-26 13:17:17
阅读次数:
83
1. HDFS产出的背景及定义 1.1 HDFS产生的背景 随着数据量越来越大,在一个操作系统存不下所有的数据,那么就分配到更多的操作系统管理的磁盘中,但是不方便管理和维护,迫切需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统。HDFS只是分布式文件管理系统中的一种。 1.2 HDFS的 ...
分类:
其他好文 时间:
2019-10-25 23:43:07
阅读次数:
170
日志分割**随着网站的访问量增加,默认情况Apache单个日志文件也会越来越大***日志文件占用磁盘空间很大*查看相关信息不方便**对日志文件进行分割***Apache自带rotatelogs分割工具实现*第三方工具cronolog分割rotatelogs分割工具配置网站的日志文件转交给rotatelogs分割处理配置格式为ErrorLog"|rotatelogs命令的绝对路径-l日志文
分类:
Web程序 时间:
2019-10-25 11:40:59
阅读次数:
114
针对Apache服务的优化与配置日志分割日志文件分析Apache压缩设置Apache缓存一、日志分割Apache日志文件默认存放位置:/var/log/httpd/默认分为accesslog和errorlog实施日志分割的目的:随着网站的访问量增加,默认情况下Apache的单个日志文件也会越来越大。日志文件占用磁盘空间很大查看相关信息不方便进行日志分割的方式:使用自带的rotatelogs分割工具
分类:
Web程序 时间:
2019-10-25 09:34:51
阅读次数:
104
论文地址:http://openaccess.thecvf.com/content_cvpr_2018/papers/Yang_DenseASPP_for_Semantic_CVPR_2018_paper.pdf 一、相关工作 1、FCN FCN开创了语义分割任务的先河,高级语义信息在分割网络中起着 ...
分类:
Web程序 时间:
2019-10-23 22:00:05
阅读次数:
180