近期公司提出利用Cassandra 做数据汇总分析，查阅一些文档，总结了一下安装过程不妥之处，敬请赐教！ 环境版本信息：OS：CentOS Linux release 7.4.1708cassandra：apache-cassandra-3.7 1.准备工作： 节点规划计划部署一个4节点的cassa ...
分类：
Web程序 时间：
2018-09-29 13:10:56
阅读次数：
199
一、ELK介绍ELK构建在开源基础之上，让您能够安全可靠地获取任何来源、任何格式的数据，并且能够实时地对数据进行搜索、分析和可视化。最近查看ELK官方网站，发现新一代的日志采集器Filebeat，他是Beats家族其中的一员，性能超越logstash，部署简单，占用资源少，可以很方便的和logstash，ES对接。从官方网站可以看出新一代ELK架构如下：1、BeatsBeats平台集合了多种单一用
分类：
其他好文 时间：
2018-09-16 20:50:45
阅读次数：
297
主动模式和被动模式被动模式，服务器端会主动连接客户端获取监控数据，客户端被动地接受，并把数据传递给服务器端主动模式，客户端主动把监控数据汇总然后再汇报给客户端，服务端只负责接收数据当客户端数量非常多的时候，建议使用主动模式，因为服务器不再会去所有客户机上请求回报数据，这样降低服务端的压力当客户端没有公网IP地址时，而又需要监控内网的客户端的时候，这时候适用主动模式，因为客户端能够访问到公网服务器的
分类：
其他好文 时间：
2018-09-13 01:17:11
阅读次数：
251
通过Hadoop安全部署经验总结，开发出以下十大建议，以确保大型和复杂多样环境下的数据信息安全。 1、先下手为强!在规划部署阶段就确定数据的隐私保护策略，最好是在将数据放入到Hadoop之前就确定好保护策略。 2、确定哪些数据属于企业的敏感数据。根据公司的隐私保护政策，以及相关的行业法规和政府规章来 ...
分类：
其他好文 时间：
2018-09-01 15:15:13
阅读次数：
177
最近一周的学习成果总结，希望在做PPT上面能持续进步。
分类：
其他好文 时间：
2018-08-25 00:38:59
阅读次数：
178
本文将汇总一些全国行政区划基础矢量数据，该版本是从其他途径抓取得到的数据，数据更加精细、属性表更加详尽、分类更加规范，可极好的满足大比例尺小范围制图使用。获取精细到乡镇级别的数据请参见《全国行政区划基础矢量数据（精确到乡镇级别）- 全国 shp 矢量数据汇总》。 数据坐标系统： WGS-84； 获取 ...
分类：
其他好文 时间：
2018-07-20 11:32:33
阅读次数：
5076
本文将汇总一些全国行政区划基础矢量数据，该版本是从其他途径抓取得到的数据，数据精细、时间新、属性表详尽、分类规范，可极好的满足大比例尺小范围制图使用。 数据坐标系统： WGS-84； 获取时间：2015年。 全部数据均为面状地物（polygon），用户可自行在 ArcMap 等软件中转换为 poly ...
分类：
其他好文 时间：
2018-07-20 11:26:30
阅读次数：
1729
本文将汇总一些全国村庄矢量点数据，该版本是从其他途径抓取得到的数据，可极好的满足各种比例尺制图使用。 数据坐标系统： WGS-84；全部数据均为点状地物（point）。 将数据命名为：全国村庄名称点（含村庄名称、经纬度等字段）。 全国村庄名称点 全部村庄名称点预览图如下： 以贵州省为例，贵州省村名点 ...
分类：
其他好文 时间：
2018-07-20 11:12:07
阅读次数：
2030
1、前言-》查询：就是对数据库内的数据进行检索、创建、修改或删除的特定请求。-》数据库的基本查询：简单查询、分组查询、数据汇总、子查询、连接查询 2、select查询语法格式 select [distinct] [top n [percent]] * from table1 join table2 ...
分类：
数据库 时间：
2018-06-06 23:52:15
阅读次数：
200
1.从文本中隔行提取数据 想法：首先想到的是对2的取余！！ awk确实有这样的编程思想，命令如下： >>awk 'NR%2' filename (>newfilename) 这是将filename 中的奇数行写入到另一个文件中：NR是行号，awk的内建函数，当第一行，NR==1时，对2取余，结果是1 ...
分类：
其他好文 时间：
2018-05-22 15:08:02
阅读次数：
160
