123

Posted 2021-11-25 lishuya

1)

学号 2017*****7209
姓名：李姝雅
仓库地址：https://gitee.com/lishuya0330/word_frequency/blob/SE7209/lishuya.py

2) 程序分析，对程序中的四个函数做简要说明。要求附上每一段代码及对应的说明。

1.打开读取文档到缓冲区。

def process_file(dst):     
    try:    
        p = open(dst,'r')
    except IOError as s:
        print (s)
        return None
    try:     
        bvffer = p.read()
    except:
        print ("Read File Error!")
        return None
    p.close()

    return bvffer

2.去掉大小写符号，空格，for循环进行统计增值，word_freq返回。

def process_buffer(bvffer):
    if bvffer:
        word_freq = {}
        
        bvffer = bvffer.lower()
        for fh in ',.!?+-_':
        
           bvffer = bvffer.replace(fh, " ")
        
        words = bvffer.strip().split()
       
        for word in words:
            word_freq[word] = word_freq.get(word, 0) + 1

        return word_freq

3.输出top10的单词。

def  output_result(word_freq):
    if word_freq:
        sorted_word_freq = sorted(word_freq.items(), key=lambda v: v[1], reverse=True)
        for item in sorted_word_freq[:10]:  # 输出 Top 10 的单词
            print(item)

if __name__ == "__main__":
    import argparse
    parser = argparse.ArgumentParser()
    parser.add_argument('dst')
    args = parser.parse_args()
    dst = args.dst
    bvffer = process_file(dst)
    word_freq = process_buffer(bvffer)
    output_result(word_freq)

3) 性能分析结果及改进。

指出执行次数最多的代码，执行时间最长的代码。

分析结果

4) 程序运行命令、运行结果截图以及改进后的程序运行命令及结果截图 。

运行大文件

python lishuya.py  Gone_with_the_wind.txt

运行小文件

python lishuya.py  A_Tale_of_Two_Cities.txt

5) 给出你对此次任务的总结与反思。

对git的不了解以至于浪费了很多时间，希望在以后的学习中更加高效率的理解知识，找到适合自己的学习方式，不要盲目翻找。