1.什么是SqlbulkCopy,解决的问题
在程序处理中经常会遇见大数据量的批量操作,比如我们要把一个文本格式的数据批量插入数据库。如果按照传统的逻辑只会将从文件中独处的数据轮询的方式一条一条的插入到目标数据库里面,这样反复连接打开数据库执行插入命令势必效率极其低下。所以很多程序在处理这样的插入操作的时候都是在半夜用户低风期处理,以免影响正常用户的使用。
.Net Framework...
分类:
数据库 时间:
2014-06-19 13:04:45
阅读次数:
397
作者:传智播客Java教研部高级讲师 栾博
云计算、物联网是近几年IT界热议的两个词语。但是初入软件编程的应届毕业生经常将一些基本的概念混淆,从而将目光一直锁定在宽泛的概念层次,不能很好地找到这些热点与我们的学习内容有哪些联系。从而好高骛远,不能踏实地学习具体技术。我认为有必要在这里对这些概念做一个辨析,并以笔者参与的一个2009年的云计算项目HiService做一个简单的介绍...
分类:
其他好文 时间:
2014-06-16 12:48:13
阅读次数:
254
最近学习大数据的处理,由于项目开发的需要,使用一种简单的方式来将Excel中的数据导入到数据库中,开发使用的kettle工具。 kettle工具安装很简单,从官网上下载下来之后,直接解压到制定的盘符下即可(前提是你配置了JAVA的环境变量,path,classpath)。 在WINDOWS环境下双击...
分类:
数据库 时间:
2014-06-15 22:10:06
阅读次数:
412
大数据与JS实现2014巴西世界杯冠军预测图 http://www.zuidaima.com/share/1855841547176960.htm...
分类:
Web程序 时间:
2014-06-15 08:13:32
阅读次数:
205
近几年,虚拟化浪潮汹涌而至,越来越多的企业意识到虚拟化应用的价值。卡巴斯基技术开发(北京)有限公司副总经理郑启良认为:“随着技术的发展,当前企业在云计算方面的投入已经非常明显,前端移动化、后端虚拟化已经成为企业IT部署未来的发展方向。” 与此同时,虚拟化环境的安全问题也日益突出。病毒感染及传播...
分类:
其他好文 时间:
2014-06-14 23:59:39
阅读次数:
375
我就不长篇大论,举四个例子你看看。1、目下最热最潮最流行的云计算技术的背后是虚拟化和网格技术,而虚拟化和网格技术基本是Linux的天下,目前虚拟化的三大家:Vmware,Xen,Hyper-V中,市场占有率最大的Vmware和Xen都是基于Linux的,Hyper-V的后展后劲还有待观察。2、巨型计...
分类:
系统相关 时间:
2014-06-14 23:08:21
阅读次数:
364
一年前,准备使用mongDb自带的map,reduce功能模拟hadoop,换个思路做一个简易的大数据分拆再结合存储的办法;这个功能可以用于数据日志或者游戏数据之类,进行周期性归纳和按照自己需求重组数据;以下代码实现了将每日数据collecttion:gameLog日期的数据统计出不同的collec...
分类:
数据库 时间:
2014-06-14 22:38:35
阅读次数:
432
云计算(Cloud)云起龙骧系列课程网络开发(Web)ASP.NET 4 风云之旅系列课程ASP.NET 开发实践系列课程MOSS2007 最佳实战 StepByStep 系列课程Silverlight 3.0 探秘之旅系列课程微软互联网平台系列课程如何创建更好的 Silverlight 程序系列课...
分类:
Web程序 时间:
2014-06-14 17:24:36
阅读次数:
522
Apache Spark?is a fast and general engine for large-scale data processing: 一种快速通用可扩展的数据分析引擎。如果想要搞清楚Spark是什么,那么我们需要知道它解决了什么问题,还有是怎么解决这些问题的。
本文将带领你进入Spark的世界,首先阐述了为什么Spark能够在众多的大数据分析平台中脱颖而出:通用,易用,高性能和与Hadoop的有效整合。Spark All in One的解决方案使用一个通用栈解决了流式,交互式,实时查询,迭代...
分类:
其他好文 时间:
2014-06-14 11:57:03
阅读次数:
288
Azure的服务是通过RESTful API提供的。虽然Azure针对很多编程语言都提供了SDK,但这些SDK也只是RESTful API的一层封装。在调用SDK或者RESTful API出错时,我们需要使用调试工具来分析并解决问题。Fiddler是一款功能强大的免费工具,我们可以使用Fiddler来调试Azure的应用程序。本文展示如何用Fiddler调试一个常见的访问Storage的问题。...
分类:
其他好文 时间:
2014-06-14 07:17:21
阅读次数:
252