业务场景:需求:通过flume进行数据采集,将本地(windows服务器)不断产生的csv文件采集到hdfs上。问题:本地文件在生成的过程中,会出现文件名重复的现象。也就是说,在前一秒生成文件名为aaa.csv,该文件经过flume进行处理之后会进行文件名的更改,默认情况下文件名会更改为aaa.cs... ...
分类:
Web程序 时间:
2020-01-23 09:14:02
阅读次数:
290
render原理: def ab_render(request): temp = Template("<h1>{{ user_dict }}{{ user_dict.username }}{{ user_dict.password }}</h1>") user_dict = Context({'us ...
分类:
其他好文 时间:
2020-01-07 20:07:49
阅读次数:
83
[TOC] rest_framework框架之认证的使用和源码实现流程 一、认证功能的源码流程 (一)、创建视图函数 Note 创建视图函数后,前端发起请求,url分配路由,执行视图类,视图类中执行对应方法必须经过dispatch()即调度方法 from rest_framework.views i ...
分类:
其他好文 时间:
2019-12-30 19:21:43
阅读次数:
53
CountDownLatch是JUC包中提供的线程同步工具,使用CountDownLatch可以实现一个或多个线程等待直到一组操作在其他线程中被执行完成。
分类:
其他好文 时间:
2019-12-26 16:21:43
阅读次数:
99
概要本文的想法来自于本人学习MySQL时的一个知识点:MySQL Innodb引擎中对缓冲区的处理。虽然没有仔细研究其源码实现,但其设计仍然启发了我。 本文针对LRU存在的问题,思考一种增强算法来避免或降低缓存污染,主要办法是对原始LRU空间划分出young与old两段区域 ,通过命中数(或bloc ...
分类:
编程语言 时间:
2019-12-18 12:28:03
阅读次数:
77
目录
1、栈的基本概念
2、Java模拟简单的顺序栈实现
3、增强功能版栈
4、利用栈实现字符串逆序
5、利用栈判断分隔符是否匹配
6、总结
分类:
编程语言 时间:
2019-12-11 11:02:38
阅读次数:
73
python文件中未引入其他包、模块 一、安装IronPython包,使用的是2.7.5版本 二、源码 2.1 python 源码,实现一个快速排序功能 2.2 C#源码 执行结果: ...
分类:
编程语言 时间:
2019-12-08 20:17:49
阅读次数:
398
基于ES6语法手写promise A+ 规范,源码实现 class Promise { constructor(excutorCallBack) { this.status = 'pending'; this.value = undefined; this.fulfilledAry = []; th ...
分类:
其他好文 时间:
2019-12-05 18:33:59
阅读次数:
86
kafka 由于它自身的高性能发送与消费能力,而受到广大企业的喜欢,所以我们就先看看kafka 一些源码实现如下: 这段代码摘抄的是,kafka源码 生产者发送消息demo(kafka.examples.Producer) 里面的一个片段,主要是涉及到两个知识点,一个是异步发送消息, 回调函数的实现 ...
分类:
其他好文 时间:
2019-11-22 23:24:35
阅读次数:
79
付哇是什么?1、付哇是一款专业的刷脸+聚合支付平台源码系统;2、付哇支持对接自己的支付宝和微信官方服务商;3、付哇基于目前流行的WEB2.0的架构(php+mysql),采用自研DOXCX框架开发+PHP7,拥有成熟、稳定的的技术解决方案;4、源码透明,一切的数据及资源都架设在自己的服务上,保证独立 ...
分类:
其他好文 时间:
2019-11-16 19:42:49
阅读次数:
69