码迷,mamicode.com
首页 >  
搜索关键字:大数据 sqoop 数据处理    ( 17411个结果
大数据学习(20)—— Zookeeper介绍
ZooKeeper是什么 就像冯巩每次出场都说:“亲爱的观众朋友们,我想死你们啦”一样,我再哔哔一次,学习大数据官网很重要。Zookeeper官网看这里ZooKeeper ZooKeeper 是一个开源的分布式协调服务,它本身也是分布式设计。它提供了一组简单的原语,基于这些指令,分布式应用能够实现同 ...
分类:其他好文   时间:2021-01-30 12:04:59    阅读次数:0
DAY 29 PYTHON入门
一 初始数据库 数据库管理软件:本质就是一个c/s架构的套接字程序 服务端套接字 客户端套接字 操作系统:Linux 操作系统 计算机(本地文件) 计算机硬件 例如:关系型数据库管理软件MySQL、Oracle去ioe 非关系型数据库管理软件redis、memcache、mongodb s c se ...
分类:编程语言   时间:2021-01-29 11:58:19    阅读次数:0
spark-------------RDD 转换算子-----value类型(一)
引言 RDD 根据数据处理方式的不同将算子整体上分为 Value 类型、双 Value 类型和 Key-Value类型,本文主要讲一些Value 类型 正文 资源路径和资源内容 map ###函数签名:def map[U: ClassTag](f: T ? U): RDD[U] ###函数说明:将处 ...
分类:其他好文   时间:2021-01-27 12:50:51    阅读次数:0
java 集合
集合: 保存多个的引用对象 Java 集合可分为 Collection 和 Map 两种体系 集合的遍历: 使用iterato()方法: iterator对象称为迭代器(设计模式的一种),主要用于遍历 Collection 集合中的元素 所有实现了Collection接口的集合类都有一个iterat ...
分类:编程语言   时间:2021-01-26 12:40:27    阅读次数:0
Node.js中的Stream
Stream主要用于序列化地数据处理(read or write input into output sequentially),比如文件读写,网络数据传输, 或任何端到端的数据交换。Stream在处理数据的时候,与传统方式有所不同,传统方式是把数据作为一个整体进行处理,而stream则是把数据分割 ...
分类:Web程序   时间:2021-01-25 11:16:01    阅读次数:0
TypeError: Object of type bytes is not JSON serializable
0.问题描述 在做一个数据处理的时候,需要将一个XMl的文件解析成一个json,关键是xml的文件格式和json不是一一对应的,需要我一点一点拼接关键信息,组成json文件,最后在写出json文件的时候,我采用了json.dump(result, json_file,indent=4),结果出现了以 ...
分类:Web程序   时间:2021-01-25 10:37:52    阅读次数:0
奈学百万大数据架构师
、数据结构与算法 1.二叉树前序、中序、后续遍历方式(递归以及非递归) 2.二叉树的深度以及广度遍历方式 3.二叉树遍历情况中所有连续节点的最大的值 4.求数组所有可能的子数组 5.给定一个数,求一个有序数组的两个数的和满足这个数(可以拓展一下变成两个无序的数组) 6.求一个数组的第二大值 7.大文 ...
分类:其他好文   时间:2021-01-22 12:22:20    阅读次数:0
五千字长文带你快速入门FlinkSQL
一、前言 最近几天因为工作比较忙,已经几天没有及时更新文章了,在这里先给小伙伴们说声抱歉…临近周末,再忙再累,我也要开始发力了。接下来的几天,菌哥将为大家带来关于FlinkSQL的教程,之后还会更新一些大数据实时数仓的内容,和一些热门的组件使用!希望小伙伴们能点个关注,第一时间关注技术干货! 二、F ...
分类:数据库   时间:2021-01-21 10:29:57    阅读次数:0
NGK Global英国路演落下帷幕,区块链赋能大数据取得新突破
NGK全球巡回路演于7月25日在英国圆满举行,此次路演是由NGK英国社区主办,旨在探讨当前大数据爆炸的形式下,区块链如何赋能,解决行业痛点。会上,行业精英、区块链爱好者、各实体产业代表以及科技人员纷纷出席,路演现场十分热闹,更有英国当地知名媒体进行争相报道。 本次路演由讲师Mark进行主题分享,Ma ...
分类:其他好文   时间:2021-01-20 11:46:41    阅读次数:0
大数据之Hbase(一):HBase简介、BigTable、面向列的数据库、非结构化数据存储、HBase在Hadoop生态中的地位、 HBase与HDFS、HBase使用场景
文章目录 5.1 HBase简介 什么是HBase BigTable 面向列的数据库 什么是非结构化数据存储 HBase在Hadoop生态中的地位 HBase与HDFS HBase使用场景 5.1 HBase简介 1 什么是HBase HBase是一个分布式的、面向列的开源数据库 HBase是Goo ...
分类:数据库   时间:2021-01-19 12:02:43    阅读次数:0
17411条   上一页 1 ... 15 16 17 18 19 ... 1742 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!