抽取信息并统计，排序任务是对语料进行预处理，对1000个问题的答案和回复进行抽取有用信息并统计。首先，分析文本内容、格式，思考如何抽取。文件有三种类型answer、comment、vote，因此在开始时根据前面几个字符先判断文件类型。接着根据需求构造对象和方法，并构造对象list来存储抽取出来的信息...
分类：
编程语言 时间：
2015-03-09 22:15:44
阅读次数：
148
一、数据挖掘数据挖掘是运用计算机及信息技术,从大量的、不全然的数据集中获取隐含在当中的实用知识的高级过程。Web 数据挖掘是从数据挖掘发展而来,是数据挖掘技术在Web 技术中的应用。Web 数据挖掘是一项综合技术,通过从Internet 上的资源中抽取信息来提高Web 技术的利用效率,也就是从Web...
分类：
Web程序 时间：
2014-11-10 13:26:19
阅读次数：
3052
一、数据挖掘数据挖掘是运用计算机及信息技术,从大量的、不全然的数据集中获取隐含在当中的实用知识的高级过程。Web 数据挖掘是从数据挖掘发展而来,是数据挖掘技术在Web 技术中的应用。Web 数据挖掘是一项综合技术,通过从Internet 上的资源中抽取信息来提高Web 技术的利用效率,也就是从Web...
分类：
Web程序 时间：
2014-10-16 13:18:02
阅读次数：
247
【版权声明：转载请保留出处：blog.csdn.net/gentleliu。Mail：shallnew at 163 dot com】
cut命令类似于awk，从行里面抽取信息，是一个功能弱化版的awk。
cut命令格式为：cut [options] filename
其中options有：
-d 指定与空格和t a b键不同的域分隔符。类似于awk的“-F”。
-f field...
分类：
其他好文 时间：
2014-08-30 09:59:59
阅读次数：
266
【版权声明：转载请保留出处：blog.csdn.net/gentleliu。Mail：shallnew at 163 dot com】
上一节说到了grep命令，grep命令主要用在获取符合规则的行信息。本节要讲的awk在对某文件或字符串中获取指定文本域有较强大的功能。
a w k语言的最基本功能是在文件或字符串中基于指定规则浏览和抽取信息。 a w k抽取信息后，才能进行其他文本操作...
分类：
其他好文 时间：
2014-08-24 22:19:33
阅读次数：
190
awk简介awk是一种编程语言，由AT&T贝尔实验室的AlfredAho，PeterWeinberger和BrianKernighan开发一种对文件进行指定规则浏览和抽取信息的工具。当然，有awk必然还要说sed，这俩都是上古神器，功能十分强大，sed和awk各有各的有点，awk在速度上要慢于sed。awk基本语法awk[op..
分类：
其他好文 时间：
2014-08-24 19:29:33
阅读次数：
349
awk是一个强大的文本分析工具，awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。awk语言的最基本功能是在文件或者字符串中基于指定规则浏览和抽取信息，awk抽取信息后，才能进行其他文本操作。使用方法awk '{pattern+action} {filename...
分类：
其他好文 时间：
2014-08-19 00:46:33
阅读次数：
391
简单使用：
awk ：对于文件中一行行的独处来执行操作 。
awk -F ：'{print $1,$4}' :使用‘：’来分割这一行，把这一行的第一第四个域打印出来 。
详细介绍：
AWK命令介绍
awk语言的最基本功能是在文件或字符串中基于指定规则浏览和抽取信息，awk抽取信息后，才能进行其他文本操作，完整的awk脚本通常用来格式化文本文件中的信息
...
分类：
其他好文 时间：
2014-07-06 12:32:46
阅读次数：
248
一、数据挖掘数据挖掘是运用计算机及信息技术,从大量的、不全然的数据集中获取隐含在当中的实用知识的高级过程。Web 数据挖掘是从数据挖掘发展而来,是数据挖掘技术在Web 技术中的应用。Web 数据挖掘是一项综合技术,通过从Internet 上的资源中抽取信息来提高Web 技术的利用效率,也就是从Web...
分类：
Web程序 时间：
2014-06-29 19:45:59
阅读次数：
452
