第一次个人项目

Github项目链接

futureseek/SE-test: SE-test (github.com)

PSP表格

项目设计

主函数

对控制台参数进行处理，调用各个模块代码依次进行。

Jieba类

对长语段进行分词处理

计算词频函数

对分开来的所有词语进行统计，计算在原语段的出现频率

计算余弦相似度

将不同的词出现频率作为空间向量各个维，所有的词语出现频率相乘作为点积，除以俩个语段的模长，求出余弦值。

程序流程图

算法的关键有三处：利用cppjie库分词处理，统计词频，计算余弦相似度

计算模块接口部分的性能改进

内存方面

utf-8后缀文件由cppjieba分词库所调用，这些文件占据了文件IO的主要部分

通过减少单词库可以减少文件IO方面的消耗，或者选用模型更下的分词算法。

各函数消耗时间

由图可知，大量的时间消耗在了构建分词模型上

异常处理说明

读取文件接口

void readfile(string& text, string path) {
    ifstream fstream;
    fstream.open(path);
    if (fstream.is_open()) {
        string line;
        while (getline(fstream, line)) {
            //cout<<line<<endl;
            text += line;
        }
    }
    else {
        cout << "Failed to open the file" << endl;
        return;
    }
    //cout<<text<<endl;
    cout << "read over" << endl;
    fstream.close();
}

检测输出流是否正确打开

对于输出文件接口做同样操作

控制台参数读取

try {
    if (argc < 4) {
        throw string("the input is error");
    }
}
catch (string e) {
    cout << e << endl;
    return 0;
}

判断是否输入正确的参数