1.Impala hadoop的sql平台、支持hbase/hdfs、支持超大数据、支持多并发、sql支持好、对内存依赖比较严重。需要自己优化，并且有的语句超过内存会报错。 2.Spark 各种格式、各种计算（机器学习、图形计算）、可sql、可代码处理、支持scala/java/python语言开发 ...
分类：
其他好文 时间：
2019-01-20 11:46:08
阅读次数：
176
最近，在使用QQ和微信等SDK来实现分享网页的时候，发现，SDK已经为页面跳转回应用提供了基本的数据支持。我们只需在应用里和被分享的网页进行简单的设置，即可实现此功能。 那么我们先来看下网页跳转回应用的实现原理。 就Android平台而言，URI主要分三个部分：scheme, authority a ...
分类：
微信 时间：
2019-01-13 16:08:20
阅读次数：
347
背景 作为一家高度数字化和技术驱动的公司，美团非常重视数据价值的挖掘。在公司日常运行中，通过各种数据分析挖掘手段，为公司发展决策和业务开展提供数据支持。经过多年的发展，美团酒旅内部形成了一套完整的解决方案，核心由数据仓库+各种数据平台的方式实现。其中数据仓库整合各业务线的数据，消灭数据孤岛；各种数据 ...
分类：
其他好文 时间：
2018-12-27 20:58:23
阅读次数：
917
[TOC] 创建 Kubernetes 集群并部署容器化应用只是第一步。一旦集群运行起来，我们需要确保一起正常，所有必要组件就位并各司其职，有足够的资源满足应用的需求。Kubernetes 是一个复杂系统，运维团队需要有一套工具帮助他们获知集群的实时状态，并为故障排查提供及时和准确的数据支持。 一、 ...
分类：
Web程序 时间：
2018-12-22 14:50:54
阅读次数：
306
mysql在5.7以后InnoDB存储引擎已经开始对json数据进行支持，对json支持有如下优势： JSON数据有效性检查：BLOB类型无法在数据库层做这样的约束性检查，如不合法会报错： 查询性能的提升：查询不需要遍历所有字符串才能找到数据 支持索引：通过虚拟列的功能可以对JSON中的部分数据进行 ...
分类：
数据库 时间：
2018-12-09 18:40:44
阅读次数：
190
要玩大数据，没有数据怎么玩？这里推荐一些33款开源爬虫软件给大家。 爬虫，即网络爬虫，是一种自动获取网页内容的程序。是搜索引擎的重要组成部分，因此搜索引擎优化很大程度上就是针对爬虫而做出的优化。 网络爬虫是一个自动提取网页的程序，它为搜索引擎从万维网上下载网页，是搜索引擎的重要组成。传统爬虫从一个或 ...
分类：
其他好文 时间：
2018-11-30 11:32:08
阅读次数：
197
比如学hadoop，从哪儿开始学首先要根据你的基本情况而定，如果你就一小白，没有任何开发基础，也没有学过任何开发语言，那就必须先从基础java开始学起（大数据支持很多开发语言，但企业用的最多的还是JAVA），接下来学习数据结构、关系型数据库、linux系统操作，夯实基础之后，再进入大数据的学习，例如 ...
分类：
其他好文 时间：
2018-11-25 16:20:43
阅读次数：
149
Mysql有多种存储引擎，最常用的有MyISAM和InnoDB这两种，每一种类型的存储引擎都有自已的特点，可以结合项目中数据的使用场景来进行了哪种存储引擎合适。 1：查看mysql数据库支持的存储引擎 可以使用的命令列出当前版本的数据支持的存储引擎： SHOW ENGINES; 可以使用以下的命令查 ...
分类：
数据库 时间：
2018-11-16 17:35:10
阅读次数：
157
由于多方可以在不改变现有数据的情况下同时更新区块链，因此可以由多个利益相关者无缝且安全地访问从各种来源捕获的客户数据。支持区块链的智能合约可以将纸质合同转换为可编程代码，有助于自动化索赔处理并计算所有参与者的责任。典型的保险合同是两个或多个当事方之间可通过法律强制执行的纸质协议，但智能合同存在于区块链中可通过代码强制执行。保险市场规模的区块链估计将以84.9％的复合年增长率增长，到2023年将达到
分类：
其他好文 时间：
2018-11-15 18:27:31
阅读次数：
190
1、 MongoDb简介 MongoDB是为互联网而生的数据库，是文档数据库。 MongoDB的优点： 1. Schema less，不需要预先定义表结构，同一个“表”中可以保存多个格式的数据； 2. 数据支持嵌套，数据以json格式存储； 3. 允许使用JavaScript写服务端脚本，类似于存储 ...
分类：
数据库 时间：
2018-10-05 21:10:50
阅读次数：
209
