写这篇文章主要是为了告诉大家,此号还活着~都9012年了,大家还不掌握点"大数据"技能?哈哈,开玩笑,本文主要是一些常用Shell命令的综合应用.(啊,发现微信公号改版后没发过,所以把这段引言也放一下)标题党一回,现如今到处都是各种"大数据",本文分析对象也就是首批积分落户的6000多条数据而已,显然不能算什么大数据.概述本文是Shell的一次综合应用,充分
分类：
其他好文 时间：
2020-08-04 10:03:38
阅读次数：
206
(图片来源:煙雨斜陽@skypixel)离开前任恩,9月我因个人原因从宜信大数据创新中心离职了,从2015年7月入职到离开,2年多的时间.如果不算之前的腾讯和友盟的实习的话,这是我第一份正式的工作,总体来说还是满感谢宜信的.?认识了一波牛人,从大家身上学了不少;?解决了户口(当然如果当初若选择其他也是可以),虽然最后离职还因此交了违约金;?接触了互联网金融这个行业,了解了诸如P2P,理财/信贷业务
分类：
其他好文 时间：
2020-08-04 10:03:25
阅读次数：
120
Apache 存储了很多的开源软件 Hadoop 处理大数据 kafka 消息队列 下载Nginx 解压nginx 进入nginx目录 cat README.md ./config --help 后2个参数分别是: 支持https 支持nginx状态页面 conf 配置文件(各种设置) html 存 ...
分类：
其他好文 时间：
2020-08-04 09:45:53
阅读次数：
82
为什么需要跨库整合能力Smartbi支持多种数据源轻松接入，基本涵盖了市面上所有主流的数据库。无可否认多元的数据连接能力使Smartbi能快速连接现有数据源，构建统一的数据分析平台。但在项目实施过程中，往往会遇到以下的问题：我们企业数据存储在不同甚至不同类型的数据库里面，当用户查询数据的范围比较广，并不限于一个数据库时，需要跨多个数据库进行关联查询分析，如果按照传统的方式：先抽取到要通过ETL把数
分类：
其他好文 时间：
2020-08-03 23:27:20
阅读次数：
110
为什么需要Excel分析自助BI使得BI不再是高管领导的专利，促成了BI的平民化，更是BI的发展趋势。但自助BI工具的选择却并不简单，很多厂商推出了自己的自助分析工具，但在企业的使用过程中，实际达到的效果却不尽如人意。为什么？由于企业大部分业务用户更加习惯使用Excel，不愿意学习新的分析工具，基于以下几个原因：1.Excel提供了非常强大灵活的数据处理、数据分析以及数据可视化的能力。2.用户存在
分类：
其他好文 时间：
2020-08-03 23:27:05
阅读次数：
119
针对hive on mapreduce 1：我们可以通过一些配置项来使Hive在执行结束后对结果文件进行合并： 参数详细内容可参考官网：https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties 1 2 3 4 ...
分类：
数据库 时间：
2020-08-03 19:56:21
阅读次数：
103
本文通过分析生产上一次Dubbo服务的拥堵事件，详细介绍Dubbo服务整个的请求流程以及与性能相关的参数。
分类：
其他好文 时间：
2020-08-03 09:49:49
阅读次数：
109
1.nosql的优点 》易拓展 》大数据量和高性能 》多样灵活的数据类型 》RDBMS（传统关系型数据库）VS NOSQL 2.nosql的实现 》以下三个软件都是对nosql理念的实现 3.nosql的重点知识点 》键值对存储，缓存，持久化 4.3v和3高 ...
分类：
数据库 时间：
2020-08-02 23:36:38
阅读次数：
95
写在前面Java后端程序员应该会遇到读取Excel信息到DB等相关需求，脑海中可能突然间想起ApachePOI这个技术解决方案，但是当Excel的数据量非常大的时候，你也许发现，POI是将整个Excel的内容全部读出来放入到内存中，所以内存消耗非常严重，如果同时进行包含大数据量的Excel读操作，很容易造成内存溢出问题但EasyExcel的出现很好的解决了POI相关问题，原本一个3M的Excel用
分类：
其他好文 时间：
2020-08-02 10:24:09
阅读次数：
95
国际惯例，先上图。这次聚会是由程序视界的安老师（程序员的成长课作者）和360的明哥组织的9人聚会，每个人都是身怀绝技，有985高校的客座教授，有月入4-5w做淘宝加运维的DBA，还有电视台的大数据分析师，靠自己的视频产品也能过的衣食无忧的大牛，还有大咖安晓辉老师，9月份就发布第七本新书了，靠着知乎、在行、写作版权在各个付费平台更是大神级别的存在，还有其他等等大牛这里就不一一介绍了，咱们重点来看这次
分类：
其他好文 时间：
2020-08-02 10:16:01
阅读次数：
71
