近段时间做了个数据平台，其中涉及到批量导出CSV格式数据的业务，主要使用了部分视图和视图之间传值等知识点，今天做了下整理，特此分享下：主要分为四步：1：要打印的数据格式陈列View；2：自定义导出表头View呈现，在通过@{Html.RenderAction(string actionName,ob...
分类：
Web程序 时间：
2014-09-24 15:37:26
阅读次数：
251
最近在做binlog日志采集同步到数据平台的事。刚开始需要借助sqoop将从库数据表数据初始化到hbase中，整个过程都需要自动化进行，尽量减少人为干预。但是，由于历史原因，线上存在两种字符集格式的数据库（表），而导入到hbase的数据我们需要统一采用utf-8格式存储。sqoop直接导入的话，没法控制中文字符转码工作。所以需要对sqoop源码进行简单改动支持这种方式。
大体思路是，通过定义一个...
分类：
数据库 时间：
2014-09-11 19:26:02
阅读次数：
573
举例几个典型的大数据平台： 1、世界客流路线图 2、气象云图 3、邮件网络 4、微博传播 5、话单 这里每个平台每3小时的数据都能达到T级数据量21世纪是信息化爆炸的时代： 搜索引擎 谷歌/百度 社交网络 QQ,facebook 电子商务 ...
分类：
其他好文 时间：
2014-09-09 19:50:49
阅读次数：
188
自从VMware在2013年的全球用户大会上推出vSphereBigDataExtention（BDE）以来，大数据这匹骏马越来越受到大家的追捧。当然BDE主要针对是Hadoop的大数据应用，其实大数据不仅仅是Hadoop，即使只算Hadoop也还有不同的发布版本。但是无论Hadoop的哪个版本或者哪个大数据平台，都蜂..
分类：
其他好文 时间：
2014-08-22 02:56:46
阅读次数：
184
QL Server 2008 R2基于SQL Server 2008提供可靠高效的智能数据平台构建而成，SQL Server 2008 R2 提供了大量新改进，可帮助您的组织满怀信心地调整规模、提高 IT 效率并实现管理完善的自助 BI。此版本中包含应用程序和多服务器管理、复杂事件处理、主数据服务及...
分类：
数据库 时间：
2014-08-14 13:55:38
阅读次数：
226
数据集成是当下比較热门的话题，相关的产品和平台也越来越多。非常多CIO都在各种数据集成平台和产品之间犹豫不决。因此对数据集成平台的框架体系有全面的理解，对各个厂家产品所提供的功能有深入的认识才干为数据平台选型的决策提供可靠的保证。我有幸參与了国内一个知名企业的集成平台的设计工作，并主导了数据集成平台...
分类：
其他好文 时间：
2014-08-05 18:22:29
阅读次数：
233
一个采用模块化设计的大数据平台可以解决80%的大数据问题，而解决另外20%的问题就要靠大数据平台厂商结合行业客户的特殊需求进行定制化开发。中兴通讯DAP2.0大数据平台就具备了这方面的能力，能够为行业客户带来实实在在的价值。大数据的本质在于，可以提升人类活动的准确性，..
分类：
其他好文 时间：
2014-08-04 18:12:18
阅读次数：
391
阿里云计算的ODPS从内部使用的工具变成了面向社会开放的大数据平台，开创了国内大数据公共服务的先河，降低了大数据在资金、人才和应用方面的门槛。小型企业只要花费几百元就能进行海量数据分析，这是真的吗?阿里云计算的大数据平台ODPS可以让你梦想成真。今年举行的阿里巴巴大..
分类：
其他好文 时间：
2014-08-04 18:11:18
阅读次数：
292
数据集成是当下比較热门的话题，相关的产品和平台也越来越多。非常多CIO都在各种数据集成平台和产品之间犹豫不决。因此对数据集成平台的框架体系有全面的理解，对各个厂家产品所提供的功能有深入的认识才干为数据平台选型的决策提供可靠的保证。我有幸參与了国内一个知名企业的集成平台的设计工作，并主导了数据集成平台...
分类：
其他好文 时间：
2014-07-25 16:32:31
阅读次数：
281
Hadoop MapReduce思维模式转变的催化剂是大量新技术的诞生，它们能够处理大数据分析所带来的3个V的挑战。扎根于开源社区，Hadoop已经是目前大数据平台中应用率最高的技术，特别是针对诸如文本、社交媒体订阅以及视频等非结构化数据。除分布式文件系统之外，伴随Hadoop一同出现的还有进行大数...
分类：
其他好文 时间：
2014-07-24 17:00:47
阅读次数：
263
