HDFS写数据流程 1.客户端通过Distributed FileSystem模块向NameNode请求上传文件，NameNode检查目标文件是否已经存在，父目录是否存在； 2.NameNode返回是否可以上传文件； 3.客户端请求一个block上传到指定的那个DataNode服务器上； 4.Nam ...
分类：
其他好文 时间：
2020-03-20 19:52:48
阅读次数：
56
前言 本文介绍如何在IDEA上快速开发基于Flink框架的DataStream程序。先直接上手！ 环境清单 案例是在win7运行。安装VirtualBox，在VirtualBox上安装Centos操作系统。所有资源都在百度云上，有需要请直接下载。安装教程基本都是傻瓜式，文章不做讲述，有需要直接网上搜 ...
分类：
其他好文 时间：
2020-03-17 00:02:47
阅读次数：
92
hadoop主备高可用故障转移机制 NameNode和2nn zookeeper保姆机制 zookeeper全新选举机制 zookeeper之非全新选举 NameNode和2nn hbase之存数据流程 hbase之创建表流程 hbase之查询路由(解决元数据信息不断增大 hbase之rowkey设 ...
分类：
其他好文 时间：
2020-03-04 22:29:35
阅读次数：
152
3.1数据库需求分析 技术博客网站的需求具体体现在各种信息的提供、保存、更新和查询方面，这就要求数据库结构能充分满足各种信息的输入和输出。收集基本数据，数据结构以及数据处理的流程，组成一份详尽的数据库。针对本学院的毕业论文完成的流程，通过对技术博客网站设计和数据流程分析，设计如下所示的数据项和数据结 ...
分类：
数据库 时间：
2019-12-28 16:35:43
阅读次数：
130
一、HDFS的写数据流程 ①服务端启动HDFS中的NN和DN进程 ②客户端创建一个分布式文件系统客户端，由客户端向NN发送请求，请求上传文件 ③NN处理请求，检查客户端是否有权限上传，路径是否合法等 ④检查通过，NN响应客户端可以上传 ⑤客户端根据自己设置的块大小，开始上传第一个块，默认0-128M ...
分类：
其他好文 时间：
2019-12-27 09:28:58
阅读次数：
183
学习总结： 过了一个学期时间的学习，对java这门语言也有了比以前更深刻的认识，取经之路还相当漫长，希望通过即时的总结了解自己学习的状况。 近期基本上都是学习的java的一些基本语法，比如数据类型、运算符、程序流程控制、数组，也在逐渐上升到面向对象编程这一概念。 而java最核心的核心就是面向对象思 ...
分类：
其他好文 时间：
2019-12-13 15:26:02
阅读次数：
92
数据字典是指对数据的数据项、数据结构、数据流、数据存储、处理逻辑、外部实体等进行定义和描述，其目的是对数据流程图中的各个元素做出详细的说明。 数据字典（Data dictionary）是一种用户可以访问的记录数据库和应用程序源数据的目录。主动数据字典是指在对数据库或应用程序结构进行修改时，其内容可以 ...
分类：
其他好文 时间：
2019-12-11 21:23:02
阅读次数：
483
redux请求数据流程 store里面的index.js文件 1 import {createStore,combineReducers,applyMiddleware} from "redux" 2 import reduxThunk from "redux-thunk" 3 import use ...
分类：
其他好文 时间：
2019-12-07 23:01:37
阅读次数：
151
源码目录 docs/example/httpcustomheader.c 添加自定义headers http-post.c 按字符串推送数据 simplepost.c 按长度推送数据 httpput.c 按文件推送 curl_easy_perform() easy_transfer() curl_m ...
分类：
Web程序 时间：
2019-12-07 19:34:33
阅读次数：
135
1. redux 数据流程图 View 会派发一个 Action Action 通过 Dispatch 方法派发给 Store Store 接收到 Action 连同之前的 State 发给 Reducer 生成新的 State Redux 的 中间件指的是 Action 和 Store 之间 中间 ...
分类：
其他好文 时间：
2019-12-03 14:24:53
阅读次数：
107
