摘抄自：https://www.cnblogs.com/qingyunzong/p/8946637.html 前言 在大数据计算领域，Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型 ...
分类：
其他好文 时间：
2019-03-03 16:23:20
阅读次数：
168
tensorflow中为了充分利用GPU，减少GPU等待数据的空闲时间，使用了两个线程分别执行数据读入和数据计算。 具体来说就是使用一个线程源源不断的将硬盘中的图片数据读入到一个内存队列中，另一个线程负责计算任务，所需数据直接从内存队列中获取。 tf在内存队列之前，还设立了一个文件名队列，文件名队列 ...
分类：
其他好文 时间：
2019-02-20 13:11:53
阅读次数：
2620
[徐培成系列实战课程]docker篇如何利用docker快速构建Spark独立模式的集群1、介绍利用docker容器技术快速构建跨节点的独立模型的Spark大数据集群。Spark是时下非常热门的大数据计算引擎，现在apche官方网站已经更新至2.3.1的版本，而且热度居高不下。很多企业越来越多的倾向于使用spark进行海量数据处理，主要是源于其高效快速的架构设计。docker也是非常热门的虚拟化技
分类：
其他好文 时间：
2019-02-18 16:07:00
阅读次数：
181
superset简介 Superset是Airbnb开源BI数据分析与可视化平台，该工具主要特点是可自助分析、自定义仪表盘、分析结果可视化（导出）、用户/角色权限控制，还集成了一个SQL编辑器，可以进行SQL编辑查询等，原来是用于支持Druid的可视化分析，后面发展为支持很多种关系数据库及大数据计算 ...
分类：
其他好文 时间：
2019-02-14 12:04:48
阅读次数：
287
2019年1月，伴随 APACHE FLINK 的母公司 Data Artisans 被收购，FLINK 毫无疑义成为继 SPARK 之后的新一代大数据计算平台，本文希望通过 GOOGLE 计算平台演进来更好的理解 FLINK。
分类：
Web程序 时间：
2019-02-13 10:48:21
阅读次数：
304
一.Md5加密 MD5算法具有以下特点： 1、压缩性：任意长度的数据，算出的MD5值长度都是固定的。 2、容易计算：从原数据计算出MD5值很容易。 3、抗修改性：对原数据进行任何改动，哪怕只修改1个字节，所得到的MD5值都有很大区别。 4、强抗碰撞：已知原数据和其MD5值，想找到一个具有相同MD5值 ...
分类：
其他好文 时间：
2019-02-12 14:38:10
阅读次数：
197
前面讲的都是前向传播，已知输入层数据，计算出输出层结果。如果我们已知输出层结果是否可以反向推理出图片的像素值呢。在前面的神经网络基础上面进行修改。 1.训练 训练神经网络和前面讲的一样。 2.定义反向查询函数 1.>定义反向激活函数。利用logit函数 2.>利用已知结果得到激活之前的输出值，在通过 ...
分类：
其他好文 时间：
2019-02-11 12:39:09
阅读次数：
188
0 前言 提前先祝大家春节快乐！好了，先简单聊聊。 我从事的是大数据开发相关的工作，主要负责的是大数据计算这块的内容。最近Hive集群跑任务总是会出现Thrift连接HS2相关问题，研究了解了下内部原理，突然来了兴趣，就想着自己也实现一个RPC框架，这样可以让自己在设计与实现RPC框架过程中，也能从 ...
分类：
其他好文 时间：
2019-02-02 00:17:08
阅读次数：
275
设备传动机构的伺服传动机构，需要计算传动机构的关系。在人机界面设置的数据体现在机构的移动距离上，而传动而是伺服驱动器、PLC数据计算与转换达到我们需要的效果。 我们以几种的传动机机构一一举例说明 一、减速机直接机构 一般情况下，在人机界面设置的单位是度，以1度为最小数值。 那么伺服驱动器一周脉冲数设 ...
分类：
其他好文 时间：
2019-01-29 18:18:14
阅读次数：
603
学习计算机组成原理，冯诺依曼体系：控制器，存储器，运算器，输入设备，输入出设备；计算机的控制逻辑：硬件，内核，库文件，SHELL，执行程序，应用程序；电脑硬件组成：CPU(E系列)，主板，显卡，硬盘，内存(8xx)，电源，网卡（4块以上实现虚拟机），显示器；主频=外频倍频；用外频超频，外频是CPU和主板交互的数据计算机语言：硬件，汇编语言，C语言，Java,php...服务器系统：WEB服务器，数
分类：
其他好文 时间：
2019-01-24 00:30:01
阅读次数：
169
