201671010444 词频统计软件项目报告

标签：模块化   image   The   修改   map   扩展   report   需求分析   任务   

该项目实施过程主要包括以下7部分。

一.需求分析

1.程序需要读入至少一个词，可读入任意英文文本。
2.至少可以统计10万词及以上的文本。
3.用户可以同时查询多个单词的统计，并显示出其个数和柱状图。
4.用户可以筛选单词频数大于n的单词，进行降序显示其单词及其频数。
5.统计文本所以单词及其词频，并在文本文件中按字典序进行显示。

二.功能设计

1.基本功能：对输入的大于等于一个单词的英文，
            实现其一个或多个单词的单词和词频统计并以柱状图的形式显示出来，
            可以对多个单词进行条件查询并对其按降序或字典序进行显示。
2.扩展功能：对输入的英文文本，筛选出包含某个单词的句子。
           （在英语单词的学习过程中，最好是结合真题去学习。那么就可以把历年真题进行扫描录入，然后筛选包含某个单词的句子。）

三.设计实现

1.模块划分及其功能：
    扑获内容：把文件或网页中的文本抓取出来，对其进行分割后用于统计。
    统计词频：对相应的词通过for循环进行词频统计。
    绘制柱状图：对统计来的数据做出直观表达。
    按字典序排序：把统计来的数据按字典序排序，并显示词及其频数。
    输出为文本：统计结果输出为文本文件。
2.模块之间的关系：捕获内容模块从源文件中捕获数据，对其进行分割后用于词频统计模块 的数据源，绘制柱状图模块把统计的来的数据直观展示，字典序排序模块对统计的单词按字典序排列显示。各模块之间相互依赖，前者为后者提供源数据。
3.重要的函数（必要时画出流程图）：

4.函数之间的关系：
前者给后者提供源数据，模块与模块之间相互依赖互相区别。

四.测试运行（附截图）

1.显示单词词频和柱状图

2.输出前K个高频词

五.代码片段精选（用代码控件显示）

1.文件读入并统计词频

// 读取要处理的文件 BufferedReader b = new BufferedReader(new FileReader("src/HarryPotter.txt")); //<单词:词频> Map<String, Integer> map = new TreeMap<String, Integer>(); String value= b.readLine(); while (value!= null) { //处理标点符号 String[] words = value.split("[【】、.。,\"!--;:?\‘\\] ]"); for (int i = 0; i < words.length; i++) { //将大写字母转换为小写字母 String key = words[i].toLowerCase(); if (key.length() > 0) { if (!map.containsKey(key)) { map.put(key, 1); } else { int k = map.get(key)+1;// 如果不是第一次出现，就把k值++ map.put(key, k); } } } value = b.readLine(); }
2.按词频或字母排序

 Set<Entry<String,Integer>> m= map.entrySet();   
       LinkedList<Entry<String, Integer>> List = new LinkedList<Entry<String,Integer>>(m);
     //按值排序
       if(a==2) {
       Collections.sort(List, new Comparator<Entry<String,Integer>>() {     
           public int compare(Entry<String, Integer> a,  Entry<String, Integer> b) {  
               return b.getValue().compareTo(a.getValue());  
          }     
       });  
      //按键排序
       else if(a==3) {
           Collections.sort(List, new Comparator<Entry<String,Integer>>() {     
               public int compare(Entry<String, Integer> a,  Entry<String, Integer> b) {  
                   return a.getKey().compareTo(b.getKey());  
              }     
           });  
       }
     //排序后存入Map中
       for(Entry<String,Integer> entry: List) {  
           Map.put(entry.getKey(), entry.getValue());  
       }  
   } 

3.向文件写入单词词频

        File file = new File("result.txt");
        //向文件写入
        FileWriter f = new FileWriter(file.getAbsoluteFile());
        for(Entry<String,Integer> w: Map.entrySet()) {
            f.write(w.getKey() + "/" + w.getValue()+"     ");
        }
        f.close();
        System.out.println("结束！");

六.总结（如何实现模块化原则）

1.按功能用函数实现了模块化。
2.最开始读数据打算用数组，后面发现处理起来有点麻烦，就选择了目前这种方式。
3.柱状图绘制时，把统计和绘制放在了一起。

七.展示PSP

总结：大部分环节都有超时现象，只要原因是因为自己对开发过程的不熟悉，对使用语言没有系统的学习过。

201671010444 词频统计软件项目报告

标签：模块化   image   The   修改   map   扩展   report   需求分析   任务   

原文地址：https://www.cnblogs.com/xiaxiangming/p/10528177.html