php环境无法上传文件的解决方法 总述（五点）：上传目录是否有写入权限；php.ini file_upload=on等其他配置；upload_tmp_dir目录user读写权限，network server出完全控制的其他权限；Temp文件夹配置；win是否禁用guests组，要给users组读取和 ...
分类：
Web程序 时间：
2020-06-27 00:19:22
阅读次数：
106
面试官：想了解对 ES 集群的运维能力。 解答： 1、关闭缓存 swap; 2、堆内存设置为：Min（节点内存/2, 32GB）; 3、设置最大文件句柄数； 4、线程池+队列大小根据业务需要做调整； 5、磁盘存储 raid 方式——存储有条件使用 RAID10，增加单节点性能以及避免单 节点存储故障 ...
分类：
系统相关 时间：
2020-06-26 16:49:44
阅读次数：
108
一个读较大文件的Channel例子， package org.scaventz.nio.mine; import java.io.File; import java.io.FileInputStream; import java.io.IOException; import java.nio.Byt ...
分类：
Web程序 时间：
2020-06-26 10:35:41
阅读次数：
65
在limit.conf配置文件中添加了如下配置 * soft nproc 65535 * hard nproc 65535 * soft nofile 131070 * hard nofile 131070 另启终端查看最大文件打开数ulimit -n仍然为1024 经过各种百度搜查，发现以前更新过 ...
分类：
其他好文 时间：
2020-06-24 12:05:31
阅读次数：
334
Kafka-文件管理 文件管理 保留数据是kafka的一个基本特性，kafaka不会一直保留数据，也不会等到所有消费者都读取了消息之后才删除消息。相反，kafka为每个主题配置了数据保留期限，规定数据被删除之前可以保留多长时间，或者清理数据之前可以保留的数据量大小。 因为在一个大文件里查找和删除消息 ...
分类：
其他好文 时间：
2020-06-24 00:44:34
阅读次数：
76
编程婴儿又在编程。 男朋友又让我给他处理数据，其中一个数据大小有10g以上，我还需要把这个数据和其他数据进行匹配，然后分组统计得到一些数据。 之前简简单单用一下read_csv不能打开这么大的数据，我在寻找办法。 因为要做匹配，所以我本来打算模块化把数据写进来之后，然后再合并起来做。但是总是不行，报 ...
分类：
编程语言 时间：
2020-06-23 01:24:52
阅读次数：
106
elk系统logstash日志处理端使用lvs做的负载均衡，端口监控发现logstash节点因为最大文件数到达限制挂了一台，lvs不知道后端的logstash挂了。看告警虚拟IP恢复是因为转发到正常的节点了，端口监控后续就一直告警波动恢复告警--！，因为lvs没有移除故障节点，处理不及时，丢的数据就多了。这边用利用ssh免密做的监控，后端RealServer不能禁止lvs禁止访问22端口，lvs定
分类：
其他好文 时间：
2020-06-22 19:11:06
阅读次数：
82
itertools 我们知道，迭代器的特点是：惰性求值（Lazy evaluation），即只有当迭代至某个值时，它才会被计算，这个特点使得迭代器特别适合于遍历大文件或无限集合等，因为我们不用一次性将它们存储在内存中。 Python 内置的 itertools 模块包含了一系列用来产生不同类型迭代器 ...
分类：
编程语言 时间：
2020-06-21 19:50:40
阅读次数：
74
1、关闭缓存 swap; 2、堆内存设置为：Min（节点内存/2, 32GB）; 3、设置最大文件句柄数； 4、线程池+队列大小根据业务需要做调整； 5、磁盘存储 raid 方式——存储有条件使用 RAID10，增加单节点性能以及避免单节点存储故障。 ...
分类：
系统相关 时间：
2020-06-20 11:17:31
阅读次数：
100
1.俩种持久化机制 持久化将数据从内存中持久化到硬盘空间。防止服务器宕机时候，存储在内存中的数据丢失 快照rdb：持久化文件 dump.rdb 默认 aof：持久化文件：appendonly.aof redis 中配置存储文件的路径：配置文件中 dbfilename dump.rdb appendo ...
分类：
其他好文 时间：
2020-06-20 01:22:31
阅读次数：
56
