基于Python的文本统计

最新推荐文章于 2023-04-27 14:06:02 发布

thistle2012

最新推荐文章于 2023-04-27 14:06:02 发布

阅读量2.2k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： Python 文件操作

本文链接：https://blog.csdn.net/u013232740/article/details/46954885

Python 同时被 2 个专栏收录

21 篇文章

订阅专栏

文件操作

9 篇文章

订阅专栏

本文提供了一个Python脚本，用于读取指定文本文件，统计并输出文件中特定字符的数量、行数、单词总数及前10个最频繁出现的单词。脚本在读取文件前需确保文件可读且无保护属性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

给定任意的文本文件，统计文件中的文字信息。

#wordstats.py
#包含所有要保留的字符集
keep={'a','b','c','d','e',
      'f','g','h','i','j',
      'k','l','m','n','o',
      'p','q','r','s','t',
      'u','v','w','x','y',
      'z',' ','-',"'"}

def normalize(s):
    """
    将字符串转化成标准字符
    """
    result=' '
    for c in s.lower():
        if c in keep:
            result += c
    return result

def make_freq_dict(s):
    """
    返回每个单词的频率数
    """
    s=normalize(s)
    words=s.split()
    d={}
    for w in words:
        if w in d: #如果W出现过，就将其出现的次数加1
            d[w] += 1
        else:
            d[w] = 1 #如果w是第一次出现，就将其出现次数设置为1
    return d

def print_file_stats(fname):
    """
    打印统计信息
    """
    s=open(fname,'r').read()
    num_chars=len(s)  #规范化S之前计算字符数
    num_lines=s.count('\n') #在规范化s之前计算行数

    d=make_freq_dict(s)
    num_words=sum(d[w] for w in d)  #计算s包含多少单词

    #创建一个列表，其中的元素为单词及其出现次数的元组，并根据单词出现的次数由高到低排列
    lst=[(d[w],w) for w in d]
    lst.sort()  #排序
    lst.reverse()  #反转

    #屏幕上打印信息
    print("The file '%s' has: "%fname)
    print("  %s characters" %num_chars)
    print("  %s lines" %num_lines)
    print("  %s words" %num_words)

    print("\nThe top 10 most frequent words are:")
    i=1  #循环变量
    for count,word in lst[:10]:
        print('%2s. %4s %s' %(i,count,word))
        i += 1

def main():
    print_file_stats('D:\\Python3.4\\82208.txt')

if __name__ == '__main__':
    main()

执行结果：