MapReduce详细工作流程之Map阶段 如上图所示 1. 首先有一个200M的待处理文件 2. 切片：在客户端提交之前，根据参数配置，进行任务规划，将文件按128M每块进行切片 3. 提交：提交可以提交到本地工作环境或者Yarn工作环境，本地只需要提交切片信息和xml配置文件，Yarn环境还需要 ...
分类：
其他好文 时间：
2019-10-08 21:48:32
阅读次数：
129
每天记录学习，每天会有好心情。*^_^* 今天将为大家分析一个基于web的建材信息管理平台，采用当前非常流行的B/S体系结构,以JAVA作为开发技术,主要依赖SSM技术框架，mysql数据库建立本系统。 本文以正处于转制关键时期的建筑材料检测企业为研究对象，考察检测企业日常工作流程，分析行业发展对检 ...
分类：
Web程序 时间：
2019-10-06 09:56:06
阅读次数：
136
前面介绍了sentinel core的流程，提到在进行流控判断时，会判断当前是本地限流，还是集群限流，若是集群模式，则会走另一个分支，这节便对集群模式做分析。 一.基本概念 namespace：限流作用于，用于区分一个规则作用于什么范围 flowId：代表全局唯一 ...
分类：
其他好文 时间：
2019-10-01 09:31:22
阅读次数：
210
前言： 一般来说，如果安装tensorflow主要目的是为了调试些小程序的话，只要下载相应的包，然后，直接使用pip install tensorflow即可。 但有时我们需要将Tensorflow的功能移植到其它平台，这时就无法直接安装了。需要我们下载相应的Tensorflow源码，自已动手编译了 ...
分类：
其他好文 时间：
2019-09-29 16:56:45
阅读次数：
103
遇到的问题 1. 检索葡萄糖关键字，希望结果仅包含葡萄糖，不包含葡萄；检索葡萄，希望结果包含葡萄糖。 2. 同义词如何配置 3. 如何确保搜索关键词被正确分词 分析器分词流程 分析器扮演着非常重要的角色，ES提供的有内置的分析器，社区也提供各种分析器插件（如中文的ik分析器）。分析器由以下几个组件构 ...
分类：
其他好文 时间：
2019-09-23 11:39:39
阅读次数：
114
看到某人写了一个流程分析貌似可以披云见日，形似之余好像回忆可以相得益彰 然后我刚刚不小心发布了，当然要准备100字的说明，这个字应该怎么打好呢，不知不觉打了好多字，我好难啊 首先这是正常情况看不到的图片，因为不停思考摸索千层雪饼的人类一般都在ICU，然而总有侥幸，于是乎就看到了图片里的缩影，图片描绘 ...
分类：
其他好文 时间：
2019-09-13 01:46:04
阅读次数：
100
前后端流程分析 技术栈：vuex + axios + localStorage + vue-router 登录路由添加自定义meta字段，来记录该页面是否需要身份验证 // router.js { path: "/index", name: "index", component: resolve = ...
分类：
其他好文 时间：
2019-08-28 11:21:41
阅读次数：
144
python manage.py runserver 流程分析 版本 搭建可运行的环境 创建python27 虚拟环境 github 下载 django 1.0.tar.gz（1.0 版本的django） 解压 可以看到，有个 demo 在 examples 目录 把 django 目录拷贝到 ex ...
分类：
编程语言 时间：
2019-08-28 00:49:25
阅读次数：
86
https://download.csdn.net/download/wuhuacai/10157233 https://blog.csdn.net/zxorange321/article/details/75676063 https://download.csdn.net/download/wuh ...
分类：
系统相关 时间：
2019-08-26 14:41:33
阅读次数：
139
Hadoop 中有三大组件：HDFS、MapReduce、YARN，HDFS 负责大文件存储的问题，MapReduce 负责大数据计算，而 YARN 负责资源的调度，接下来的文章我会一一介绍这几个组件。今天我们先来聊聊 HDFS 的架构及文件的读写流程。 总体架构 HDFS 设计的目的是为了存储大数 ...
分类：
其他好文 时间：
2019-08-24 16:56:05
阅读次数：
103
