拓扑排序的过程大概是这样的：① 选择一个入度为0 的结点并直接输出。② 删除这个结点以及与它关联的所有边。③ 重复步骤①和②，直到找不到入度为0 的结点。 在一个有向图中，对所有的节点进行排序，要求没有一个节点指向它前面的节点。先统计所有节点的入度，对于入度为0的节点就可以分离出来，然后把这个节点指 ...
分类：
编程语言 时间：
2020-02-11 19:17:10
阅读次数：
72
-- 查询 -- 单表查询 -- 查询全部: select * from 表名 -- 别名: select 字段1 别名, 字段2, ... from 表名 -- 连接符: select concat(字符1, 字符2) from dual -- 去重: select distinct 字段 fro ...
分类：
数据库 时间：
2020-02-11 09:30:45
阅读次数：
83
uniq a.不加参数只对相邻的相同行去重 uniq test.txt b.sort命令让重复的行相邻 先用sort做排序，让重复的行相邻，然后用uniq去重 sort test.txt | uniq 用sort -u即可实现该功能，这里的-u就是uniq c.去重计数 参数-c --count 去 ...
分类：
编程语言 时间：
2020-02-10 15:21:02
阅读次数：
298
编写独立应用程序实现数据去重 对于两个输入文件 A 和 B，编写 Spark 独立应用程序，对两个文件进行合并，并剔除其 中重复的内容，得到一个新文件 C。下面是输入文件和输出文件的一个样例，供参考。 输入文件 A 的样例如下： 20170101 x 20170102 y 20170103 x 20 ...
分类：
其他好文 时间：
2020-02-08 00:38:35
阅读次数：
200
今天主要学习了spark实验四的内容，实验四主要为RDD编程，本实验的重点为两个编程题 1.编写独立应用程序实现数据去重对于两个输入文件 A 和 B，编写 Spark 独立应用程序，对两个文件进行合并，并剔除其中重复的内容，得到一个新文件 C。下面是输入文件和输出文件的一个样例，供参考。输入文件 A ...
分类：
其他好文 时间：
2020-02-06 23:17:43
阅读次数：
168
1.数组去重 2.字符串去重 属性： Set.prototype.size：返回Set实例的成员总数。 Set 实例的方法分为两大类：操作方法（用于操作数据）和遍历方法（用于遍历成员）。下面先介绍四个操作方法。 add(value)：添加某个值，返回 Set 结构本身。 delete(value)： ...
分类：
其他好文 时间：
2020-02-06 18:10:52
阅读次数：
69
一、列表 定义：是Scala中一种重要的容器 特点：1.可以存储同类型的重复数据 2.是有序的（可以进行索引操作，有先来后到之分） 分类：1.不可变列表：内容与长度均不可变 2.可变列表：内容元素与长度均可变 1.不可变列表 定义： 1 //第一种方式：List关键字 常用 2 var l1 = L ...
分类：
其他好文 时间：
2020-02-06 16:21:40
阅读次数：
59
最近在找工作，好几次面试都问过数组去重的问题。虽然问的都不一样，但是核心思想是没有变的。第一种是比较常规的方法思路：构建一个新的数组存放结果for循环中每次从原数组中取出一个元素，用这个元素循环与结果数组对比若结果数组中没有该元素，则存到结果数组中Array.prototype.unique1 = ... ...
分类：
编程语言 时间：
2020-02-06 12:48:36
阅读次数：
116
JS数组去重的几种常见方法 一、简单的去重方法 // 最简单数组去重法 /* * 新建一新数组，遍历传入数组，值不在新数组就push进该新数组中 * IE8以下不支持数组的indexOf方法 * */ function uniq(array){ var temp = []; //一个新的临时数组 f ...
分类：
编程语言 时间：
2020-02-05 11:58:09
阅读次数：
78
网络爬虫 Web crawler 可以代替人工自动从互联网中进行数据信息的采集和整理 按照一定的规则自动抓取万维网上的信息程序或者脚本 从功能上区分为 数据采集 处理 储存 这三个部分 从流程上来说 从一个或者若干个网页URL地址去抓取指定的想要的内容 为什么学习爬虫 1 可以实现搜索引擎 2大数据 ...
分类：
Web程序 时间：
2020-02-04 10:21:29
阅读次数：
203
