paddlepaddle是百度提出来的深度学习的框架，个人感觉其实和tensorflow差不多(语法上面)，因为本人也是初学者，也不是很懂tensorflow，所以，这些都是个人观点。 百度的paddlepaddle提出貌似有一段时间了，我是最近才知道的，好奇去看了看，而且最近在看tensorflo ...
分类：
其他好文 时间：
2017-12-25 23:26:53
阅读次数：
288
在做数据处理时，需要用到不同的手法，如特征标准化，主成分分析，等等会重复用到某些参数，sklearn中提供了管道，可以一次性的解决该问题 先展示先通常的做法 先对数据标准化，然后做主成分分析降维，最后做回归预测 现在使用管道 Pipeline对象接收元组构成的列表作为输入，每个元组第一个值作为变量名 ...
分类：
编程语言 时间：
2017-12-22 12:24:14
阅读次数：
266
需求： 一直写的代码都是从加载数据，模型训练，模型预测，模型评估走出来的，但是实际业务线上咱们肯定不能每次都来训练模型，而是应该将训练好的模型保存下来 ，如果有新数据直接套用模型就行了吧？现在问题就是怎么在实际业务中保存模型，不至于每次都来训练，在预测。 解决方案： 机器学习-训练模型的保存与恢复（ ...
分类：
其他好文 时间：
2017-12-19 01:36:52
阅读次数：
172
原来的算法模型中，没有考虑买了又买的物品，对于钢材行业，用户的需求是一致的，经常买了又买，所以增加此功能a模型训练中增加如下代码
//buyitemforusers
JavaPairRDD<String,String>buyItemForUser=data.getBuyEvents().mapToPair(newPairFunction<UserItemEvent,..
分类：
其他好文 时间：
2017-11-21 14:19:02
阅读次数：
207
昨天，因为项目需求要添加表的更新接口，来存储预测模型训练的数据。 先码为敬~~~~~~~ 1 # -*- coding: utf-8 -*- 2 import pymysql 3 import settings 4 5 class mysql(object): 6 def __init__(self ...
分类：
数据库 时间：
2017-11-19 13:33:25
阅读次数：
251
最近要开始读论文了，其实自己读论文的能力挺不怎么样的，并且读过就忘记，这实在是让人很不爽的事情。自己分析记不住的原因可以有以下几点： 读论文时理解就不深刻，有时候就是一知半解的 读完之后没有总结，即没有自己概括这篇论文的过程，所以文中一知半解的过程还是忽略了，并且以后再回顾的时候，这篇论文对自己来说 ...
分类：
其他好文 时间：
2017-11-17 21:02:02
阅读次数：
222
Algorithm类@Override
publicModeltrain(SparkContextsc,PreparedDatapreparedData){
TrainingDatadata=preparedData.getTrainingData();
//模型训练
//建立用户索引
JavaPairRDD<String,Integer>userIndexRDD=data.getUsers().map(newFunction<Tuple2<String,Us..
分类：
其他好文 时间：
2017-11-13 19:49:23
阅读次数：
132
https://www.cnblogs.com/wentingtu/archive/2012/03/13/2393993.html Table of Contents 1 前言 2 LTR流程 3 训练数据的获取4 特征抽取 3.1 人工标注 3.2 搜索日志 3.3 公共数据集 5 模型训练 5. ...
分类：
其他好文 时间：
2017-11-09 22:20:39
阅读次数：
261
MNIST 卷积神经网络。https://github.com/nlintz/TensorFlow-Tutorials/blob/master/05_convolutional_net.py 。TensorFlow搭建卷积神经网络(CNN)模型，训练MNIST数据集。 构建模型。 定义输入数据，预处 ...
分类：
其他好文 时间：
2017-11-04 11:19:37
阅读次数：
265
TensorFlow提供了一个用于保存模型的工具以及一个可视化方案 这里使用的TensorFlow为1.3.0版本 保存模型数据 模型数据以文件的形式保存到本地； 使用神经网络模型进行大数据量和复杂模型训练时，训练时间可能会持续增加，此时为避免训练过程出现不可逆的影响，并验证训练效果，可以考虑分段进 ...
分类：
其他好文 时间：
2017-10-27 21:37:45
阅读次数：
305
