Spark 分组取Top N运算 大数据处理中，对数据分组后，取TopN是非常常见的运算。 下面我们以一个例子来展示spark如何进行分组取Top的运算。 1、RDD方法分组取TopN from pyspark import SparkContext sc = SparkContext() 准备数据 ...
分类：
其他好文 时间：
2020-07-06 16:11:05
阅读次数：
78
题目一 MyISAM和InnoDB的区别，什么时候选择MyISAM 参考回答 InnoDB是目前MySQL主流版本(5.6、5.7、8.0)默认的存储引擎，支持事务、外键、行级锁，对于并发条件下要求数据的一致性，适用于对数据准确性要求高的场景。 MyISAM只支持表级锁、数据排列是按照插入顺序，没有 ...
分类：
数据库 时间：
2020-05-26 00:55:03
阅读次数：
92
已知线性表中的元素以值递增有序排列，并以单链表做存储结构。试写一高效的算法， 删除表中所有值大于 mink 且小于 maxk 的元素（若表中存在这样的元素）,同时释放被删除节点空间，并分析你的算法的时间复杂度（注意：mink 和 maxk 是给定的两个参变量，它们的值可以和表中的元素相同，也可以不同 ...
分类：
其他好文 时间：
2020-05-23 20:21:08
阅读次数：
80
LRU全称Least Recently Used，也就是 最近最少使用的意思，是一种内存管理算法，该算法最早应用于 Linux操作系统。 这个算法基于一种假设：长期不被使 用的数据，在未来被用到的几率也不大。因此，当数据所占内存达 到一定阈值时，我们要移除掉最近最少被使用的数据。 LRU算法中，使用 ...
分类：
编程语言 时间：
2020-04-30 13:33:34
阅读次数：
65
原文:与下位机或设备的通信解析优化的一点功能:T4+动态编译 去年接触的一个项目中,需要通过TCP与设备进行对接的,传的是Modbus协议的数据,然后后台需要可以动态配置协议解析的方式，即寄存器的解析方式，，配置信息有：Key，数据Index，源数据类型，数据库列类型，数据排列方式 一开始使用的方式... ...
分类：
其他好文 时间：
2020-02-22 15:53:49
阅读次数：
80
一、pandas简介 pandas是一个强大的Python数据分析的工具包。 pandas是基于NumPy构建的。 1.pandas的主要功能： 1. 具备对其功能的数据结构DataFrame、Series 2. 集成时间序列功能 3. 提供丰富的数学运算和操作 4. 灵活处理缺失数据 2.安装方法 ...
分类：
其他好文 时间：
2019-11-01 11:17:37
阅读次数：
111
迭代就类似循环。数字不是可迭代类型。Iterable表示是否是可迭代对象，Iterator表示是否是迭代器。数据流是一个有序的数据排列集合，表示没有截止的，就像水流和时间一样，无穷无尽的。而列表，字典等有起点和终点的。
分类：
编程语言 时间：
2019-07-03 10:40:34
阅读次数：
119
一、C++标准库介绍 C++标准库：C++ Standard Library C++标准库与STL有什么关系： STL：Standard Template Library STL包含6大部件，基本占标准库的80%左右内容，而另外20%是一些好用的零碎的东西，所以说C++标准库包含STL。 编译器一定 ...
分类：
编程语言 时间：
2019-06-28 09:12:57
阅读次数：
223
1、数组 数组是一组有序数据的集合，数据中的数据排列下标代表数据在数组的序号；数组中每一个元素都属于同一个数据类型，不能把不同的数据类型放在同一个数组里面。 2、如何定义一对数组 要使用数组，必须在程序中先定义数组，要清楚那些数据构成数组，数组中有多少元素，属于哪个数据类型。数组的一般形式是，类型符 ...
分类：
编程语言 时间：
2019-05-25 22:53:07
阅读次数：
152
内存堆和栈的区别 原文: http://student.csdn.net/link.php?url=http://www.top-e.org%2Fjiaoshi%2Fhtml%2F427.html 在计算机领域，堆栈是一个不容忽视的概念，我们编写的C语言程序基本上都要用到。但对于很多的初学着来说，堆 ...
分类：
其他好文 时间：
2018-12-09 16:37:54
阅读次数：
121
