1. ioutil包的方法 // Discard 是一个 io.Writer 接口，调用它的 Write 方法将不做任何事情 // 并且始终成功返回。 var Discard io.Writer = devNull(0) // ReadAll 读取 r 中的所有数据，返回读取的数据和遇到的错误。 / ...
分类：
其他好文 时间：
2020-02-02 11:45:35
阅读次数：
65
在kubernetes的scheduler调度器的设计中为用户预留了两种扩展机制SchdulerExtender与Framework，本文主要浅谈一下SchdulerExtender的实现， 因为还有一篇Framework, 所以本文的k8s代码切到1.18版本 1. 设计思路 1.1 实现机制 S ...
分类：
Web程序 时间：
2020-02-01 22:54:49
阅读次数：
169
在之前的程序中我们发现分词不太准确，因此我们可以使用支持中文分词。 分析器的执行过程： 从一个reader字符流开始，创建一个基于reader的tokenizer分词器，经过三个tokenfilter（第一个大写变小写，第二个用回车替换空格，去掉不需要的a，the，and，逗号等）生成tokens。 ...
分类：
Web程序 时间：
2020-02-01 21:10:22
阅读次数：
99
//class my_fileReader( e ) { console.log(e.target.files[0]); const reader = new FileReader(); // 用readAsText读取TXT文件内容 reader.readAsText(e.target.files ...
分类：
编程语言 时间：
2020-02-01 19:07:38
阅读次数：
266
一、读取单个表单 import pandas as pdexcel_reader=pd.ExcelFile('文件.xlsx') # 指定文件 sheet_names = excel_reader.sheet_names # 读取文件的所有表单名，得到列表 df_data = excel_reade ...
分类：
其他好文 时间：
2020-01-29 18:05:04
阅读次数：
136
A Digital Library contains millions of books, stored according to their titles, authors, key words of their abstracts, publishers, and published years ...
分类：
其他好文 时间：
2020-01-27 14:08:44
阅读次数：
84
C# 控制台应用 实现 2048游戏 using System; using System.Collections.Generic; using System.Linq; using System.Text; using System.Threading.Tasks; namespace Game ...
网站上有9000多张照片要下载: //一开始参考https://www.jb51.net/article/153275.htm用reader和writer进行io.Copy,但经常是抓取100多个网页后就崩溃了， //原因似乎是输入输出流影响或并发数量影响，代码执行快，输出流写硬盘慢。 //后来参考 ...
分类：
其他好文 时间：
2020-01-23 18:26:47
阅读次数：
84
Shuffle基本流程 spark shuffle从总体来讲分成两部分，shuffle write和shuffle reader，如下图所示，看到这里，就明白了为什么spark性能优化的时候建议宁可broadcast也不要shuffle，broadcast好歹还是内存操作，网络上大一点压力（每个节点... ...
分类：
其他好文 时间：
2020-01-19 09:27:09
阅读次数：
63
