一个logstash很容易通过http打断成两个logstash实现跨服务器或者跨平台间数据同步，比如原来的流程是 logstash: nginx log -> kafka 打断成两个是 logstash1: nginx log -> http out logstash2: http in ->ka ...
分类：
Web程序 时间：
2019-03-20 01:15:24
阅读次数：
245
presto 0.217 官方：http://prestodb.github.io/ 一 简介 Presto is an open source distributed SQL query engine for running interactive analytic queries against ...
分类：
其他好文 时间：
2019-03-14 13:26:12
阅读次数：
163
HiBench 7官方：https://github.com/intel-hadoop/HiBench 一 简介 HiBench is a big data benchmark suite that helps evaluate different big data frameworks in te ...
分类：
其他好文 时间：
2019-02-26 13:38:47
阅读次数：
488
Cluster Platform redhat/centos7, docker, mesos, cloudera manager(cdh) Checklist 1 check user & password & network reachability, make sure everything i ...
分类：
其他好文 时间：
2019-02-23 01:35:21
阅读次数：
137
立的大数据实验室中，绝大多数采用产学研结合模式——高校与企业共建，在此浪潮中高校成为了国家大数据实验室的重要参与者，同时很多高校开设了大数据专业，大数据平台成为高校教育和科研的重要手段。那么，什么样的大数据平台能够满足高校建立大数据实验室，满足专业师生的教学、科研、实验等相关需求？具备快速交付大数据基础硬件环境的能力；面对教学实战中的多种大数据环境要求，具备按需部署、构建交付组合多样的大数据软件环
分类：
其他好文 时间：
2019-02-21 20:17:59
阅读次数：
224
一 官方 airflow官方分布式部署结构图 airflow进程 webserver scheduler flower（非必须） worker airflow缺点 scheduler单点 通过在scheduler的dags目录变动dag文件来提交流程 官方分布式部署方案 多个webserver 多个 ...
分类：
其他好文 时间：
2019-02-20 09:51:48
阅读次数：
154
marathon-lb 官方：https://github.com/mesosphere/marathon-lb 一 简介 Marathon load balancer (Marathon-LB) is a proxy server and load balancer for TCP, HTTP, ...
分类：
其他好文 时间：
2019-02-18 18:59:37
阅读次数：
178
marathon 1.6.322 官方：https://mesosphere.github.io/marathon/ 一 简介 Marathon is a production-grade container orchestration platform for Mesosphere’s Datac ...
分类：
其他好文 时间：
2019-02-15 19:59:30
阅读次数：
224
1、Linux下命令行中的复制和粘贴 2、打开网卡 3、修改为静态IP 4、IP地址 5、网关 6、子网掩码 7、DNS服务器1、2 8、vi /etc/resolv.conf 9、重启网卡 10、 如何测试可以ping通 11、解压JDK命令 12、系统JDK环境变量的位置 13、写入 14、环境... ...
分类：
其他好文 时间：
2019-02-14 22:25:10
阅读次数：
260
airflow 1.10.0 官方：http://airflow.apache.org/ 一 简介 Airflow is a platform to programmatically author, schedule and monitor workflows. Use airflow to aut ...
分类：
其他好文 时间：
2019-01-26 18:47:11
阅读次数：
555
