一、单机编程框架 单机程序是指启动和运行都在一台机器的一个进程中完成，因为没有网络开销，非常适合参数不多、计算量小的模型。 步骤，创建单机数据流图，创建并运行单机会话。 如果想指定机器上的设备如cpu,gpu 可以使用 with tf.device('/cpu:0'): …… 二、分布式程序编程框架 ...
分类：
其他好文 时间：
2019-12-24 10:04:14
阅读次数：
97
1.placeholder 一个数据占位符，用于在构建一个算法时留出一个位置，然后在run时填入数据。 2.variable 存储节点作为数据流图中的有状态节点，其主要作用是在多次执行相同数据流图时存储特定的参数，如深度学习或机器学习的模型参数。对于无状态节点，其输出由输入张量和节点操作共同确定，对 ...
分类：
其他好文 时间：
2019-12-22 10:42:04
阅读次数：
85
一、简介 在上一篇文章中，大概讲了下Flux设计模式的使用，在末尾顺便提了一些基于Flux的脚本库，其中Redux已经毋庸置疑地成为了众多脚本库的翘楚之一。是的，Redux是基于Flux开发的，Redux库的尺寸非常小，代码量少，核心目的仍是处理数据流变化的问题。Redux并不完全是Flux，它只是 ...
分类：
其他好文 时间：
2019-12-22 00:48:13
阅读次数：
93
Logstash：多个配置文件（conf） 对于多个配置的处理方法，有多个处理方法： 多个pipeline 一个pipleline处理多个配置文件 一个pipeline含有一个逻辑的数据流，它从input接收数据，并把它们传入到队列里，经过worker的处理，最后输出到output。这个output ...
分类：
其他好文 时间：
2019-12-21 13:48:31
阅读次数：
113
需要学习的地方：使用logstash获取数据后，然后根据这些数据再从MySQL数据库中进行匹配，增加一些数据到logstash的数据流中，然后输出到es 在IoT物联网时代，我们经常会遇到从传感器采集数据的情况。这些传感器，可以上传物联网数据，比如温度，湿度。通常这些传感器带有自己的ID，但是它并不 ...
分类：
数据库 时间：
2019-12-21 13:36:37
阅读次数：
122
由软考知识的引发的思考，详细 需求分析阶段 根据用户需求，画出数据流图，并设计数据字典。根据数据流图和数据字典生成需求规格说明书。 概念结构设计 ER模型建模，此步骤和DBMS无关。 逻辑结构设计 设计关系模式（逻辑结构设计的产物，通过对ER模型的转化得来，此过程没有涉及到DBMS）。 即通过Pow ...
分类：
数据库 时间：
2019-12-20 13:33:36
阅读次数：
130
DFD图的基本概念 分层数据流图 结构化开放方法的主流工具，顶层图就是要开发的系统，然后逐步细化。 数据字典 配合数据流图使用，清楚数据的组成部分。 例如 数据流图平衡原则 一个加工应该既有输入又有输出，只有输入没有输出称为黑洞，只有输出没有输入称为奇迹。 ...
分类：
其他好文 时间：
2019-12-19 13:20:35
阅读次数：
88
一、安装 pip install tensorflow 二、简介 tensor是张量的意思，flow是流动 张量是数据的载体，包括标量，向量，矩阵，数据立方，n维的数据 tensorflow的数据流图，用节点和有向边描述数学运算的有向无环图，图中节点代表操作，具体包括数学运算，数据填充，结果输出和变 ...
分类：
其他好文 时间：
2019-12-19 10:14:49
阅读次数：
110
文件和流 I/O 2017/03/30 文件和流 I/O（输入/输出）是指在存储媒介中传入或传出数据。 在 .NET Framework 中，System.IO 命名空间包含允许以异步方式和同步方式对数据流和文件进行读取和写入操作的类型。 这些命名空间还包含对文件执行压缩和解压缩的类型，以及通过管道 ...
分类：
Web程序 时间：
2019-12-18 14:50:13
阅读次数：
112
众所皆知，web上传大文件，一直是一个痛。上传文件大小限制，页面响应时间超时.这些都是web开发所必须直面的。 本文给出的解决方案是：前端实现数据流分片长传，后面接收完毕后合并文件的思路。 实现文件夹上传，要求：服务端保留层级结构，支持10w级别的文件夹上传。 大文件上传及断点续传，要求：支持50G ...
分类：
Web程序 时间：
2019-12-16 19:02:11
阅读次数：
80
