c++ fstream + string 处理大数据

标签：c++fstream文件读写   c++java文件处理对比   c++   

（1）之前处理文本数据时，各种清洗数据用的都是java的File,FileReader/FileWriter,BufferedReader/BufferedWriter等类，详见java读写文件

（3）应用java的另一个原因是java里面的string类的字符串处理非常灵活，各种函数是应用尽有。

（5）c++里面也有相对比较成熟的string类，里面的函数也大部分很灵活，没有的也可以很容易的实现split，strim等，详见c++string 实现

二：fstream的前世今生

（1）简介

（2）文件打开函数

（3）打开方式                                                                   

（4）文件指针定位

（5）fstream , stream ;ifstream,istream;ofstream,ostream等的关系

三：实战篇

（1）read word by word ;no write

 //读取方式: 逐词读取, 词之间用空格区分(遇到空格认为本次读取结束)，输出之后进行下一次读取
 //read data from the file, Word By Word
 //when used in this manner, we'll get space-delimited bits of text from the file
 //but all of the whitespace that separated words (including newlines) was lost.
void ReadDataFromFileWBW()
{
    ifstream fin("data.txt");
    string s;
    cout << "*****start*******" << endl;
    while( fin >> s )
    {
          cout << "Read from file: " << s << endl;
    }
    cout << "*****over*******" << endl;
}

 //读取方式: 逐行读取, 将行读入字符数组, 行之间用回车换行区分
 //If we were interested in preserving whitespace,
 //we could read the file in Line-By-Line using the I/O getline() function.
void ReadDataFromFileLBLIntoCharArray()
{
    ifstream fin("data.txt",ios::in);// 默认的打开模式就是ios::in
    ofstream fout("out.txt",ios::out);// 默认代开模式就是ios::out
    const int LINE_LENGTH = 100;
    char str[LINE_LENGTH];
    fout << "****CharArray start******" << endl;
    cout << "****CharArray start******" << endl;
    fin.seekg(-20,ios::end);// -20表示从end向前移动20字节，汉字占两字节；20表示向后移动指针
    while( fin.getline(str,LINE_LENGTH) )
    {
        fout << str << endl;
        cout << "Read from file: " << str << "..." << endl;// ****str里面本身包含着换行的，原来是什么样子，现在保存的就是什么样子
    }
    fout << "*****over*******" << endl;
    cout << "*****over*******" << endl;
}

 //读取方式: 逐行读取, 将行读入字符串, 行之间用回车换行区分
 //If you want to avoid reading into character arrays,
 //you can use the C++ string getline() function to read lines into strings
void ReadDataFromFileLBLIntoString()
{
    ifstream fin("data.txt",ios::in);// 默认的打开模式就是ios::in
    ofstream fout("out.txt",ios::app);// 追加到文件尾的方式打开
    string s;
    cout << "****start******" << endl;
    while( getline(fin,s) )
    {
        fout << s << endl;// ofstream是默认，若文件不存在，则先建立此文件，并且再向文件写的过程中换行已经不存在了，这与cout控制台输出一样哦。。。
        cout << "Read from file: " << s << endl;//****s同str里面本身已经没有了换行的，这和原来的getline()函数是一样的；数据原来是什么样子，现在保存的就是什么样子
    }
    fout << "*****over*******" << endl;
    cout << "*****over*******" << endl;
    fout.close();
}

(4) main函数

#include <iostream>
#include <fstream>
#include <string>
#include <cstdlib>// exit()函数

using namespace std;

 //输出空行
void OutPutAnEmptyLine()
{
      cout<<"\n";
}

 //带错误检测的读取方式
 //Simply evaluating an I/O object in a boolean context will return false
 //if any errors have occurred
void ReadDataWithErrChecking()
{
    string filename = "dataFUNNY.txt";
    ifstream fin( filename.c_str());
    if( !fin )
    {
          cout << "Error opening " << filename << " for input" << endl;
          exit(-1);
    }
}

int main()
{
      ReadDataFromFileWBW(); //逐词读入字符串
      OutPutAnEmptyLine(); //输出空行

      ReadDataFromFileLBLIntoCharArray(); //逐词读入字符数组
      OutPutAnEmptyLine(); //输出空行

      ReadDataFromFileLBLIntoString(); //逐词读入字符串
      OutPutAnEmptyLine(); //输出空行

      ReadDataWithErrChecking(); //带检测的读取
     return 0;
}

data文本文件的数据格式

（5）总结

c++ fstream + string 处理大数据

标签：c++fstream文件读写   c++java文件处理对比   c++   

原文地址：http://blog.csdn.net/u010700335/article/details/41621187