码迷,mamicode.com
首页 > 其他好文 > 详细

OD矩阵形成分析

时间:2017-05-22 16:44:37      阅读:159      评论:0      收藏:0      [点我收藏+]

标签:处理   demo   reducer   根据   输入   chain   文件   origin   nat   

project:ChainOD_demo

输入:0803-0830出行链

输出:

  1. origin:28天×48段/天=1344段(0.5小时作为一个time bin)//两个部分
  2. destination:同样

过程:首先将进站时间戳处理成97-1440范围内的数(因为是从3号开始的),即根据时间戳就能知道这条记录在哪个段内,并将reducer的数目设置为1500,同一个时间段的记录放在同一个reducer里面,这样就能每个reduce输出一个文件,而这个文件是在同一个时间段内的。

 

OD矩阵形成分析

标签:处理   demo   reducer   根据   输入   chain   文件   origin   nat   

原文地址:http://www.cnblogs.com/amelie-tingting/p/6889461.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!