//CSVReader.h
#define MAP_LINE std::map //key为首行字符串, value为此列字符串
#define MAP_CONTENT std::map //key为code, value为一行map
#define VEC_MAP std::vector>
//csv文件读取器
class CSVReader
{
public:
CSV...
分类：
其他好文 时间：
2015-05-22 19:17:20
阅读次数：
156
用批处理程序来操作动辄上GB的数据很可能会拖死整个系统,但现在我们可以通过Spring Batch将其拆解为多个小块(chunk)。Spring框架中的 Spring Batch 模块, 是专门设计了用来对各种类型文件进行批处理的工程。 本文先从一个简单的作业(Job)入手 —— 将从CSV文件中读取产品列表,并导入到MySQL数据库中; 然后我们一起研究 Spring Batch 的批处理特性...
分类：
数据库 时间：
2015-05-21 19:38:50
阅读次数：
268
using System.Data;
using System.IO; namespace DotNet.Utilities
{ /// /// CSV文件转换类 /// public static class CsvHelper { /// /// 导出报表为Csv /// /// ...
今天在用程序向Neo4j导入csv文件时，报以下错误：java.net.ConnectException: Connection refused: connect java.rmi.ConnectException: Connection refused to host: 127.0.0.1;...
分类：
其他好文 时间：
2015-05-17 12:11:06
阅读次数：
130
这不是一个有说服力的测试，算是我的体验吧通过pandas.read_csv函数将总共1.44GB的164个csv文件依次（转为dataframe对象，并新增2条series，再将该dataframe通过pandas.to_sql函数写成1.23GB的sqlite数据库文件，从导入第四个文件后，就越来...
分类：
数据库 时间：
2015-05-16 01:25:24
阅读次数：
658
写这篇文章，起源于要写一个脚本批量把CSV文件（文件采用GBK或utf-8编码）写入到sqlite数据库里。Python版本：2.7.9sqlite3模块提供了con = sqlite3.connect("D:\\text_factory.db3") 这样的方法来创建数据库（当文件不存在时，新建库）...
分类：
数据库 时间：
2015-05-14 18:20:51
阅读次数：
828
gg224@126.com85男dd123@126.com52女fgf125@126.com23女csv文件内容如上图，首先导入csv包，调用csv中的方法reader()创建一个对象，由于使用print data 打印出来的内容是集合，所以要想获取集合中某个具体值如“邮箱”，需要利用列表遍历...
分类：
编程语言 时间：
2015-05-13 21:20:31
阅读次数：
182
Python数据分析入门最近，Analysis with Programming加入了Planet Python。作为该网站的首批特约博客，我这里来分享一下如何通过Python来开始数据分析。具体内容如下：数据导入导入本地的或者web端的CSV文件；数据变换；数据统计描述；假设检验单样本t检验；可视...
分类：
编程语言 时间：
2015-05-13 21:17:49
阅读次数：
405
在这里，arff文件以Weka安装目录下data文件夹中的iris.arff文件为例。
1、先在weka中将arff文件转换为csv文件，然后删除csv文件中第一行对属性名的描述，如下图。
2、保存，并放到数据库数据文件目录下（如C:\ProgramData\MySQL\MySQL Server 5.5\data\weka）；
3、在navicat下对应的数据库建立数据表，本例中：crea...
分类：
数据库 时间：
2015-05-11 10:49:15
阅读次数：
812
# 这个月的第一天#..........................................到这里之前是取当年第一天#(Get-Date 0).AddYears((Get-Date).Year - 1).AddMonths((Get-Date).Month - 2)# 这个月的最后一天#...
