这是该系列的第二篇文章: "在ASP.NET Core 3.0中使用Serilog.AspNetCore" 。 1. "第1部分 使用Serilog RequestLogging来简化ASP.NET Core的日志输出" 2. "第2部分 用Serilog记录所选终结点的附加属性" (本文) 3. ...
分类:
其他好文 时间:
2020-01-21 23:18:26
阅读次数:
100
比如两个rdd 两个分区合并去他们的并集 intersection 去数据的交集 subtract去差集 mappartition与map像是遍历的单位是每个pation分区的数据进来的是iterrter是迭代器 distinct去重(map+reducebykey+map) cogroup 作用在 ...
分类:
其他好文 时间:
2020-01-19 11:04:30
阅读次数:
97
具体的官网链接为:https://hadoop.apache.org/docs/r2.10.0/hadoop-project-dist/hadoop-common/SingleCluster.html 官方Grep案例 [root@iZbp1efx14jd8471u20gpaZ hadoop-2.7 ...
分类:
其他好文 时间:
2020-01-13 23:35:42
阅读次数:
136
+ Hadoop常见的端口 + Hadoop生态圈 + Hadoop配置文件以及简单的Hadoop集群搭建 + Hadoop参数调优 + 项目经验之基准测试 + Hadoop宕机 + Hadoop 高可用配置 Hadoop 常见的端口 ? dfs.namenode.http address:5007 ...
分类:
其他好文 时间:
2020-01-08 19:08:08
阅读次数:
91
sqoop简介 sqoop是一款开源的工具,主要用于在hadoop和与传统的数据库之间进行的数据的传递,可以将一个关系型数据库中的数据导入到hadoop的hdfs中,也可以将hdfs的数据导入到关系型数据库中。sqoop的命名由来就是 ,它的原理就是将导入或者导出命令翻译成MapReduce来实现, ...
分类:
数据库 时间:
2019-12-28 16:30:57
阅读次数:
131
使用beyond comapre进行分支代码的合并是常用的方法,同时比较2个分支的代码,选择需要和入的代码后再提交即可。 如果是不能使用beyond comapre的情况下,使用IDEA的分支比较功能来实现代码的合并也很方便。 右下角有GIt比较的选项,选择需要比较的分支后即可进行文件的比较。 比较 ...
分类:
其他好文 时间:
2019-12-15 23:58:49
阅读次数:
404
2019-12-11 Spark的框架体系 三个核心组件:SparkCore SparkSQL SparkStreaming Spark有三种部署模式:Stanalone Yarn Messos Spark和MapReduce之间区别 ***** 1.Spark把运算中数据放到内存中,迭代计算效率会 ...
分类:
其他好文 时间:
2019-12-11 21:33:03
阅读次数:
153
一、默认网址 Global.asax 默认网址配置: 此时打开编辑页面,效果如下: ?后面包含name参数和Email参数 在Global中修改网址路由: public static void RegisterRoutes(RouteCollection routes) { routes.Ignor ...
分类:
Web程序 时间:
2019-12-07 20:53:08
阅读次数:
86
配置 在 Startup.ConfigureServices 方法中,创建具有 AddAuthentication 和 AddCookie 方法的身份验证中间件服务: AuthenticationScheme 传递到 AddAuthentication 设置应用程序的默认身份验证方案。 如果有多个 ...
分类:
Web程序 时间:
2019-12-01 15:18:56
阅读次数:
123
一、MVC 服务注册 ASP.NET Core 3.0 添加了用于注册内部的 MVC 方案的新选项Startup.ConfigureServices。三个新的顶级扩展方法与 MVC 方案上IServiceCollection可用。 模板使用这些新方法,而不是UseMvc。 但是,AddMvc继续像它 ...
分类:
Web程序 时间:
2019-11-22 01:20:06
阅读次数:
123