DataTable与Excel之间的互导 1.项目添加NPOI的引用 NPOI项目简介： NPOI是一个开源的C#读写Excel、WORD等微软OLE2组件文档的项目，特点是可以在没有安装Office的情况下对Word或Excel文档进行读写操作。并且对老版本Office（2003-）与新版本Off ...
基本信息 CIFAR-10 是一个包含60000张图片的数据集。其中每张照片为32*32的彩色照片，每个像素点包括RGB三个数值，数值范围 0 ~ 255。 所有照片分属10个不同的类别，分别是 'airplane', 'automobile', 'bird', 'cat', 'deer', 'do ...
分类：
其他好文 时间：
2019-11-04 09:34:02
阅读次数：
87
机器学习库sklearn 官方documentation（资料）中分为不同的部分： 其中我们主要讲User Guide(机器学习算法理论介绍)、API(程序实现方法)： 一、User Guide https://scikit-learn.org/stable/user_guide.html 二、ap ...
分类：
编程语言 时间：
2019-11-03 14:23:33
阅读次数：
111
import numpy as np from math import sqrt import operator as opt def normData(dataSet): maxVals = dataSet.max(axis=0) minVals = dataSet.min(axis=0) ran ...
分类：
其他好文 时间：
2019-11-02 21:47:24
阅读次数：
87
SparkSQL采用Spark on Hive模式，hive只负责数据存储，Spark负责对sql命令解析执行。
SparkSQL基于Dataset实现，Dataset是一个分布式数据容器，Dataset中同时存储原始数据和元数据(schema) ...
分类：
数据库 时间：
2019-11-01 09:24:31
阅读次数：
82
首先是sklearn的官网：http://scikit-learn.org/stable/ 在官网网址上可以看到很多的demo，下边这张是一张非常有用的流程图，在这个流程图中，可以根据数据集的特征，选择合适的方法。 2.sklearn使用的小例子 3.sklearn数据集 在上边例子中，直接使用了s ...
分类：
其他好文 时间：
2019-10-31 18:30:34
阅读次数：
76
sklearn 的数据集有好多个种 自带的小数据集（packaged dataset）：sklearn.datasets.load_<name> 可在线下载的数据集（Downloaded Dataset）：sklearn.datasets.fetch_<name> 计算机生成的数据集（Generat ...
分类：
其他好文 时间：
2019-10-31 18:13:52
阅读次数：
162
背景 将Server1上的数据同步到Server2； Server1目录结构： Server2目录结构： 我需要将 Server1 里的 qlib 传到 Server2 yahoo 目录下； 并且 Server1 往 Server2 传时排除 dataset_cache 和 features_cac ...
分类：
其他好文 时间：
2019-10-30 11:48:23
阅读次数：
106
在开发中经常会遇到将当前处理批次的数据与数据库内的数据做校验的情况，通过有两种处理方式： 1、将待校验的数据一次性加载到DataSet，再将待校验的数据与DataSet内的数据逐行比较。 2、待校验数据在使用时，才从DB取出那一条数据进行比对。 第一种方法要每次在DataSet中查找数据，第二种直接 ...
分类：
数据库 时间：
2019-10-29 20:00:24
阅读次数：
95
pytorch数据读取机制： sampler生成索引index，根据索引从DataSet中获取图片和标签 1.torch.utils.data.DataLoader 功能：构建可迭代的数据装在器 dataset:Dataset类，决定数据从哪读取及如何读取 batchsize:批大小 num_wor ...
分类：
其他好文 时间：
2019-10-27 22:41:09
阅读次数：
291
