如何使用python计算文本文件中包含100个句子的平均句子长度(以单词为单位)

2024-04-29 16:21:49 发布

您现在位置:Python中文网/ 问答频道 /正文

我有一个包含100个句子的文本文件。我想写一个python脚本,它将从包含100个句子的文本文件中计算平均句子长度(以单词为单位)。 谢谢


Tags: 脚本单位单词句子文本文件
3条回答
wordcounts = []
with open(filepath) as f:
    text = f.read()
    sentences = text.split('.')
    for sentence in sentences:
        words = sentence.split(' ')
        wordcounts.append(len(words))
average_wordcount = sum(wordcounts)/len(wordcounts)

天真的方式:

sents = text.split('.')
avg_len = sum(len(x.split()) for x in sents) / len(sents)

严肃的方法是:使用nltk根据目标语言规则标记文本。

这应该能帮你。但这是基本的东西,你至少应该自己尝试一下。

这段代码假设每个句子都在一个新行上。

如果不是这样的话,你可以修改代码,或者在你的问题中反映出来,这个问题还不清楚。

def read_lines_from_file(file_name):
    with open(file_name, 'r') as f:
        for line in f:
            yield line.strip()

def average_words(sentences):
    counts = []
    for sentence in sentences:
        counts.append(sentence.split())
    return float(sum(counts)/len(counts))

print average_words(read_lines_from_file(file_name))

相关问题 更多 >