写这篇文章主要是为了告诉大家,此号还活着~都9012年了,大家还不掌握点"大数据"技能?哈哈,开玩笑,本文主要是一些常用Shell命令的综合应用.(啊,发现微信公号改版后没发过,所以把这段引言也放一下)标题党一回,现如今到处都是各种"大数据",本文分析对象也就是首批积分落户的6000多条数据而已,显然不能算什么大数据.概述本文是Shell的一次综合应用,充分
分类：
其他好文 时间：
2020-08-04 10:03:38
阅读次数：
206
(图片来源:煙雨斜陽@skypixel)离开前任恩,9月我因个人原因从宜信大数据创新中心离职了,从2015年7月入职到离开,2年多的时间.如果不算之前的腾讯和友盟的实习的话,这是我第一份正式的工作,总体来说还是满感谢宜信的.?认识了一波牛人,从大家身上学了不少;?解决了户口(当然如果当初若选择其他也是可以),虽然最后离职还因此交了违约金;?接触了互联网金融这个行业,了解了诸如P2P,理财/信贷业务
分类：
其他好文 时间：
2020-08-04 10:03:25
阅读次数：
120
Apache 存储了很多的开源软件 Hadoop 处理大数据 kafka 消息队列 下载Nginx 解压nginx 进入nginx目录 cat README.md ./config --help 后2个参数分别是: 支持https 支持nginx状态页面 conf 配置文件(各种设置) html 存 ...
分类：
其他好文 时间：
2020-08-04 09:45:53
阅读次数：
82
为什么需要跨库整合能力Smartbi支持多种数据源轻松接入，基本涵盖了市面上所有主流的数据库。无可否认多元的数据连接能力使Smartbi能快速连接现有数据源，构建统一的数据分析平台。但在项目实施过程中，往往会遇到以下的问题：我们企业数据存储在不同甚至不同类型的数据库里面，当用户查询数据的范围比较广，并不限于一个数据库时，需要跨多个数据库进行关联查询分析，如果按照传统的方式：先抽取到要通过ETL把数
分类：
其他好文 时间：
2020-08-03 23:27:20
阅读次数：
110
为什么需要Excel分析自助BI使得BI不再是高管领导的专利，促成了BI的平民化，更是BI的发展趋势。但自助BI工具的选择却并不简单，很多厂商推出了自己的自助分析工具，但在企业的使用过程中，实际达到的效果却不尽如人意。为什么？由于企业大部分业务用户更加习惯使用Excel，不愿意学习新的分析工具，基于以下几个原因：1.Excel提供了非常强大灵活的数据处理、数据分析以及数据可视化的能力。2.用户存在
分类：
其他好文 时间：
2020-08-03 23:27:05
阅读次数：
119
Apache DolphinScheduler 诞生记 DolphinScheduler，简称”DS”, 中文名 “小海豚调度”（海豚聪明、人性化，又左右脑可互相换班，终生不用睡觉）。希望 DolphinScheduler 就像它的名字一样，成为一个“开箱即用”的灵活易用的调度系统。 1概述 DAG ...
分类：
Web程序 时间：
2020-08-03 19:58:52
阅读次数：
138
本文通过分析生产上一次Dubbo服务的拥堵事件，详细介绍Dubbo服务整个的请求流程以及与性能相关的参数。
分类：
其他好文 时间：
2020-08-03 09:49:49
阅读次数：
109
1、应用场景实时数据流通过kafka后，根据业务需求，一部分直接借助kafka-connector入Elasticsearch不同的索引中。另外一部分，则需要先做聚类、分类处理，将聚合出的分类结果存入ES集群的聚类索引中。如下图所示：业务系统的分层结构可分为：接入层、数据处理层、数据存储层、接口层。那么问题来了？我们需要基于聚合（数据处理层）的结果实现检索和聚合分析操作，如何实现更快的检索和更高效
分类：
其他好文 时间：
2020-08-03 09:46:14
阅读次数：
76
1.nosql的优点 》易拓展 》大数据量和高性能 》多样灵活的数据类型 》RDBMS（传统关系型数据库）VS NOSQL 2.nosql的实现 》以下三个软件都是对nosql理念的实现 3.nosql的重点知识点 》键值对存储，缓存，持久化 4.3v和3高 ...
分类：
数据库 时间：
2020-08-02 23:36:38
阅读次数：
95
计算机网络发展 ①第一代网络 多个终端用户分时占用主机上德资源 通信控制器： 完成全部的通信任务，让主机专门进行数据的处理，提高数据处理的效率 集中器： 负责从终端到主机的数据集中以及从主机到终端的数据分发 ②分组交换网络 优点：所有的网络节点都同等重要，因而大大提高网络的生存性；有冗余的路由；网络 ...
分类：
其他好文 时间：
2020-08-02 12:45:48
阅读次数：
152
