Node开发环境搭建1、从官网下载nodejs的安装包2、安装基本上一路next即可3、检测C:\Users\Administrator>pathPATH=C:\ProgramFiles\Java\jdk1.7.0_79\bin;C:\ProgramFiles\VanDykeSoftware\Clients\;C:\ProgramData\Oracle\Java\javapath;D:\ap
分类：
其他好文 时间：
2018-10-19 17:41:27
阅读次数：
137
Kafka是最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx日志、访问日志，消息服务等等，用scala语言编写，Linkedin于
分类：
其他好文 时间：
2018-10-18 16:57:12
阅读次数：
137
https://www.jianshu.com/p/91975f66427d 最近用laravel-admin在做一个小项目，其中用到了excel导出功能。 但是laravel-admin自带的导出功能不带图片，并且导出的数据有很多冗余的字段，并非我所需要的功能。 所以参考官方文档调整代码，实现了自 ...
分类：
其他好文 时间：
2018-10-17 16:48:27
阅读次数：
522
一、背景 基本所有公司互联网公司都会有离线和实时任务，达到实时的目的手段据个人了解有storm、spark-streaming、flink。今天来探讨一下spark-streaming任务的开发到上线过程中遇到的问题。 公司领导最近提了一个实时展示用户、产品各方面统计数据的需求，对于数据埋点需要有一 ...
分类：
其他好文 时间：
2018-10-15 23:17:27
阅读次数：
332
一、数据生产实现 1.配置数据生产模块 项目基础配置所包含的内容，如下所示： ?项目工程的文件配置 ?集群连接信息配置 ?开发演示 项目基础配置所包含的内容，如下所示： ?项目工程的文件配置 ?集群连接信息配置 ?开发演示 2.实现 Flume 到 Kafka 模块 实现 Flume 到 Kafka ...
分类：
其他好文 时间：
2018-10-14 00:32:24
阅读次数：
166
一 Kafka概述 1.1 Kafka是什么 在流式计算中，Kafka一般用来缓存数据，Storm通过消费Kafka的数据进行计算。 1）Apache Kafka是一个开源消息系统，由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 2）Kafka最初是由LinkedIn开发， ...
分类：
其他好文 时间：
2018-10-14 00:21:19
阅读次数：
147
一、项目整体概述 简述项目的背景 背景：用户行迹企业运营 分析项目的目的 通过对项目的分析，可以初步得到以下目的： ?实时掌握用户动态 ?根据实时统计结果，适度推广 ?统计分析效果，快速合理的调整 通过对项目的分析，可以初步得到以下目的： ?实时掌握用户动态 ?根据实时统计结果，适度推广 ?统计分析 ...
分类：
其他好文 时间：
2018-10-14 00:21:10
阅读次数：
114
# http://archive.apache.org/dist/storm/apache-storm-1.1.0/ # 安装 storm # 环境变量# node1 node2 node3 # node1 # node1 # node2 node3 # 启动 ...
分类：
其他好文 时间：
2018-10-12 01:33:34
阅读次数：
172
今天遇到了一个问题。 因为我比较习惯使用webstorm编辑器，特别喜欢直接用里面的git工具。 当从远程仓库fetch下来代码时，提示输入用户名密码。 我输入错误后，以后无论是重启webstorm或者清空设置里的passwords选项，均无效果。 这个正确的解法应该是： 在凭据里找到相应的项目，然 ...
分类：
Web程序 时间：
2018-10-10 23:47:49
阅读次数：
396
问题缘由 因为实习的时候，公司要求将Git升级到最新版本，然后我就升级了。 这里之前有一段小插曲： 因为最初下载Git的本地目录是中文目录，然后在webstorm里面配置Git的路径时最好是用英文的路径，所以在本地就自己新建了一个英文的目录，然后将中文目录下的Git拷贝到英文目录下。可能之前自己也没 ...
分类：
其他好文 时间：
2018-10-10 20:17:06
阅读次数：
800
