Sequelize.JS是node里面比较常用的一个ORM(对象映射模型),提供了很多丰富的接口,egg-sequelize是基于其做的一个egg项目下的ORM插件 安装: npm install egg-sequelize mysql2 -S // 或者 yarn add egg-sequeliz ...
分类:
数据库 时间:
2020-03-20 13:08:04
阅读次数:
465
原文链接: https://www.toutiao.com/i6764296608705151496/ 单词统计的是统计一个文件中单词出现的次数,比如下面的数据源 其中,最终出现的次数结果应该是下面的显示 那么在MapReduce中该如何编写代码并出现最终结果? 首先我们把文件上传到HDFS中(hd ...
分类:
编程语言 时间:
2020-03-20 00:51:35
阅读次数:
96
国际化多语言支持是现在系统通常都要具备的功能,Vue对国际化提供了很好的支持。1. 安装依赖首先需要安装国际化组件,执行yarn add vue-i18n命令,安装i18n依赖。2.添加配置在src下新建i18n目录,并创建一个index.js.import Vue from 'vue'import... ...
分类:
编程语言 时间:
2020-03-19 23:13:01
阅读次数:
91
umi+ dva + antd构建react工程项目(组件化开发搭建项目)1.官方网站安装node.js(并确保 node 版本是 10.13 或以上)2.先确保安装成功npm或者yarn3.npm i yarn tyarn -g (国内源)4.如果你没有 npx,需要先安装它,用于执行 node_ ...
分类:
其他好文 时间:
2020-03-18 11:31:12
阅读次数:
1651
大数据开发总体架构: Hadoop是大数据开发所使用的一个核心框架。使用Hadoop可以方便的管理分布式集群,将海量数据分布式的存储在集群中,并使用分布式并行程序来处理这些数据。 Hadoop由许多子系统组成,如下图: Hadoop1.x与2.x的对比: YARN:管理集群资源(内存、CPU) ...
分类:
其他好文 时间:
2020-03-17 19:30:09
阅读次数:
49
cross-env相信大家都用过,这里就不过多描述,首先我们来安装cross-env npm install cross-env 或者yarn add cross-env 安装完成之后就可以在项目中使用,有些脚手架自带有cross-env(Ant-Design-Pro)所以就省去安装了 今天给大家介 ...
分类:
其他好文 时间:
2020-03-17 14:10:15
阅读次数:
256
YARN YARN是什么? YARN是一种新的 Hadoop 资源管理器,它是一个通用资源管理系统,可为上层应用提供统一的资源管理和调度,它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。 如果没有YARN! 无法管理集群资源分配问题。 无法合理的给程序分配合理的资源。 不方便监控 ...
分类:
其他好文 时间:
2020-03-17 13:51:21
阅读次数:
82
记录工作或者学习中包管理安装丶更新依赖遇到的问题: 一:vue项目 yan run build打包时候提示 To use this template, you must update following to modules: npm: 6.5.0-next.0 should be >= 3.0.0 ...
分类:
其他好文 时间:
2020-03-16 12:32:28
阅读次数:
100
总结一下大数据开发基本常识: JDK(做java开发必备的开发工具包) Hadoop(Apache开发的分布式系统的基础框架)三大组件:MapReduce,Yarn,Hdfs Sqoop(数据迁移,清洗) Kettle(数据清洗,格式转换) Hive(基于Hadoop的数据仓库,并不是数据库,需要安 ...
分类:
系统相关 时间:
2020-03-15 22:17:01
阅读次数:
90
Yarn是一个资源调度平台,负责为运算程序提供服务器运算资源,相当于分布式的操作系统平台。 Yarn基本架构 Yarn主要由ResourceManager、NodeManager、ApplicationMaster和Container等组件构成。 ResourceManager的作用: 处理客户端请 ...
分类:
其他好文 时间:
2020-03-13 20:25:14
阅读次数:
53