随着访问量的增加，nginx的日志会越来越多，日志体积会越来越大，不便于运维人员查看。切割可以以天为单位，如果日志每天有几百个G或者几个T的话。则可以按需每半天或者每小时对日志切割。 1、nginx日志切割shell /usr/local/nginx/sbin vi cut_my_log.sh #! ...
分类：
其他好文 时间：
2020-06-11 00:58:44
阅读次数：
59
Nginx定时日志切割 现有的日志都会存在access.log文件中，但是随着时间的推移，这个文件的内容会越来越多，体积会越来越大，不便于运维 人员查看，所以我们可以通过把这个大的日志文件切割为多份不 同的小文件作为日志，切割规则可以以天为单位，如果每天有几 百G或者几个T的日志的话，则可以按需以每 ...
分类：
其他好文 时间：
2020-06-10 12:47:13
阅读次数：
52
1、为什么要分表？数据库数据越来越大，随之而来的是单个表中数据太多。以至于查询速度变慢，而且由于表的锁机制导致应用操作也搜到严重影响，出现了数据库性能瓶颈。mysql中有一种机制是表锁定和行锁定，是为了保证数据的完整性。表锁定表示你们都不能对这张表进行操作，必须等我对表操作完才行。行锁定也一样，别的sql必须等我对这条数据操作完了，才能对这条数据进行操作。当出现这种情况时，我们可以考虑分表或分区。
分类：
数据库 时间：
2020-06-06 23:09:24
阅读次数：
69
在最近项目中的tomcat日志没有做系统分割，日志越来越大，每次排查生产问题都会话好长时间，并且日志文件很大。所以就想写一个shell脚本进行定时将日志进行切割。 #!/bin/bash source /home/mfls/.bash_profile cd `dirname $0` d=`date ...
分类：
其他好文 时间：
2020-06-04 15:20:46
阅读次数：
64
1、为什么要分表？数据库数据越来越大，随之而来的是单个表中数据太多。以至于查询速度变慢，而且由于表的锁机制导致应用操作也搜到严重影响，出现了数据库性能瓶颈。mysql中有一种机制是表锁定和行锁定，是为了保证数据的完整性。表锁定表示你们都不能对这张表进行操作，必须等我对表操作完才行。行锁定也一样，别的sql必须等我对这条数据操作完了，才能对这条数据进行操作。当出现这种情况时，我们可以考虑分表或分区。
分类：
数据库 时间：
2020-06-04 12:15:18
阅读次数：
63
1.什么是分库分表 一个库一个表 拆分为 N个库N个表 分为垂直拆分，水平拆分 2.为什么要分库分表 随着业务发展，表的数量，以及单表数据量越来越大，而由于无法分布式部署(部分数据库支持)，单台服务器资源(cpu 内存,IO)的限制，导致数据操作开销大，查询慢，因此需要进行分库分表，提高数据查询速度 ...
分类：
其他好文 时间：
2020-06-03 00:51:42
阅读次数：
79
hbase在创建表的时候，一开始只有一个Region，当数据量越来越大时，此region不能承受数据量，就会进行split 这种方式有两种缺点：1.数据往一个region上写,会有写热点问题 2.region split会消耗宝贵的集群I/O资源 所以引入了预分区概念。 https://blog.c ...
分类：
其他好文 时间：
2020-06-02 11:27:42
阅读次数：
69
具体的大数据处理方法确实有很多，但是根据笔者长时间的实践，总结了一个普遍适用的大数据处理流程，并且这个流程应该能够对大家理顺大数据的处理有所帮助。大数据来源广泛，应用需求和数据类型都不尽相同，不过最基本的处理流程是一样的。 大数据处理的基本流程 一般来说，大数据处理的基本流程可以分为数据抽取与集成、数据分析和数据解释这三个步骤。 一、数据抽取与集成 大数据来源广泛、种类多样、数据类型极
分类：
其他好文 时间：
2020-06-01 13:56:06
阅读次数：
668
Visual Studio 2019已经出来一段时间，由于VS现在的生态越来越大， 如果全部安装最少需要几十个G，因此选择在线安装也就更加方便，不过由于开发者网络环境各异，离线安装更加贴切，下面介绍下Visual Studio 2019的离线下载。 第一步，下载VS2019 Community版本， ...
分类：
其他好文 时间：
2020-05-28 13:43:00
阅读次数：
330
机器人现在比较有前途的方向不外乎：工业机器人、无人飞行器（UAV）、无人驾驶汽车（UGV）、医疗机器人。工业机器人现在需求量越来越大，是个不错的行业，但目前主要做研究的都是公司了，大学里几乎不做了（但大学会用工业机器人做点别的研究，比如抓握研究，就是面对不规则物体时，如何判定形体，如何用机械手准确、稳定地抓握）。UAV主要是政府在投钱，军队用。UGV是政府和一些有前瞻性的公司，就目前的技术情况，恐
分类：
其他好文 时间：
2020-05-27 17:14:17
阅读次数：
99
