Программа Python, которая находит наиболее частое слово в TXT файле, должна печатать слово и его количество

Ответ 1

Если вам нужно подсчитать количество слов в проходе, тогда лучше использовать регулярное выражение.

Начнем с простого примера:

import re

my_string = "Wow! Is this true? Really!?!? This is crazy!"

words = re.findall(r'\w+', my_string) #This finds words in the document

Результат:

>>> words
['Wow', 'Is', 'this', 'true', 'Really', 'This', 'is', 'crazy']

Обратите внимание, что "Is" и "is" - это два разных слова. Я предполагаю, что вы хотите, чтобы они считали их одинаковыми, поэтому мы можем просто загладить все слова, а затем посчитать их.

from collections import Counter

cap_words = [word.upper() for word in words] #capitalizes all the words

word_counts = Counter(cap_words) #counts the number each time a word appears

Результат:

>>> word_counts
Counter({'THIS': 2, 'IS': 2, 'CRAZY': 1, 'WOW': 1, 'TRUE': 1, 'REALLY': 1})

Вы здесь хорошо?

Теперь нам нужно сделать то же самое, что мы сделали выше, только на этот раз мы читаем файл.

import re
from collections import Counter

with open('your_file.txt') as f:
    passage = f.read()

words = re.findall(r'\w+', passage)

cap_words = [word.upper() for word in words]

word_counts = Counter(cap_words)

Ответ 2

Эта программа на самом деле является 4-х линейной, если вы используете мощные инструменты в вашем распоряжении:

with open(yourfile) as f:
    text = f.read()

words = re.compile(r"[\w']+", re.U).findall(text)   # re.U == re.UNICODE
counts = collections.Counter(words)

Регулярное выражение найдет все слова, независимо от примыкающей к ним пунктуации (но считая апострофы как часть слова).

Счетчик действует почти как словарь, но вы можете делать такие вещи, как counts.most_common(10), добавлять счетчики и т.д. См. counts.most_common(10) help(Counter)

Я бы также предложил, чтобы вы не делали функции printBy..., так как только функции без побочных эффектов легко использовать повторно.

def countsSortedAlphabetically(counter, **kw):
    return sorted(counter.items(), **kw)

#def countsSortedNumerically(counter, **kw):
#    return sorted(counter.items(), key=lambda x:x[1], **kw)
#### use counter.most_common(n) instead

# 'from pprint import pprint as pp' is also useful
def printByLine(tuples):
    print( '\n'.join(' '.join(map(str,t)) for t in tuples) )

Демо-версия:

>>> words = Counter(['test','is','a','test'])
>>> printByLine( countsSortedAlphabetically(words, reverse=True) )
test 2
is 1
a 1

отредактировать по адресу Mateusz Konieczny комментарий: заменил [a-zA-Z '] на [\ w']... класс символов \w, в соответствии с документацией по питону, "соответствует символам в слове Unicode; это включает в себя большинство символов, которые могут быть часть слова на любом языке, а также цифры и знак подчеркивания. Если используется флаг ASCII, сопоставляется только [a-zA-Z0-9_]. " (... но явно не соответствует апострофу...) Однако \w включает _ и 0-9, поэтому, если вы не хотите их использовать и не работаете с юникодом, вы можете использовать [a-zA -Z ']; если вы работаете с юникодом, вам нужно сделать отрицательное утверждение или что-то еще, чтобы вычесть [0-9_] из класса символов \w

Ответ 3

У вас есть простая опечатка, words, где вы хотите word.

Изменить: Вы, кажется, отредактировали источник. Используйте копию и вставку, чтобы получить ее в первый раз.

Изменить 2: Очевидно, вы не единственный, кто подвержен опечаткам. Реальная проблема в том, что у вас lines, где вы хотите line. Приносим извинения за то, что вы обвинили вас в редактировании источника.

Ответ 4

Здесь возможное решение, не столь изящное, как ninjagecko, но все же:

from collections import defaultdict

dicto = defaultdict(int)

with open('yourfile.txt') as f:
    for line in f:
        s_line = line.rstrip().split(',') #assuming ',' is the delimiter
        for ele in s_line:
            dicto[ele] += 1

 #dicto contians words as keys, word counts as values

 for k,v in dicto.iteritems():
     print k,v

Ответ 5

 words = ['red', 'green', 'black', 'pink', 'black', 'white', 'black', 
'eyes','white', 'black', 'orange', 'pink', 'pink', 'red', 'red', 
'white', 'orange', 'white', "black", 'pink', 'green', 'green', 'pink', 
'green', 'pink','white', 'orange', "orange", 'red']

 from collections import Counter
 counts = Counter(words)
 top_four = counts.most_common(4)
 print(top_four)