Анализ тегов Твиттера

@Gorsd44 · Регистрация: 15.11.2021

Студворк — интернет-сервис помощи студентам

В текстовом файле находится выгрузка постов из Твиттера, за некоторый период, в которых встречаются теги. Выясните, какие теги являлись более популярными, а какие менее, подсчитав количество употреблений каждого.

ФОРМАТ ВВОДА

Текстовый файл tweets.txt, в котором записана подборка постов из Твиттера, размеченных тегами. Тегом считается любое слово, начинающееся с символа '#'. Гарантируется, что все теги записаны маленькими буквами, и в них не встречаются знаки препинания.
ФОРМАТ ВЫВОДА

Текстовый файл tags.txt в кодировке utf-8, где каждый твит, использованный в файле tweets.txt, записан в формате "тег: <тег>, упоминаний: <кол-во упоминаний>". Каждый тег должен быть записан на отдельной строке, теги нужно отсортировать по количеству упоминаний от самого большого к самому маленькому

ЧТО ИСПОЛЬЗУЕМ:
def, return, with open(), for, if/else, sorted(), print() или .write()

ЧТО ДЕЛАЕМ:
1. Создаем пустой словарь для тегов и количества их упоминаний (теги будут ключами, количество их упоминаний — значениями).
2. Определяем функцию которая принимает один параметр — ключ словаря, а возвращает значение этого ключа из словаря из п.1. Мы будем позже использовать ее для сортировки по ключу.
3. Открываем файл tweets.txt. Реализуем цикл for для строк файла — для каждой строки запускаем еще один цикл for по строке, разбитой на слова по пробелам:
Проверяем каждое слово: если это тег (т.е. если первый символ слова #) и его еще нет среди ключей из п.1, то этот тег записывается в словарь и ему присваивается значение 1.
Если это тег и он уже есть в словаре из п.1, то обновляем значение этого ключа — прибавляем к нему 1 (увеличиваем на 1 количество упоминаний).
4. По завершении работа цикла открываем файл tags.txt в режиме записи с нужной кодировкой. Внутри конструкции with open() запускаем цикл for по отсортированному словарю из п.1. Не забудьте добавить ключ сортировки (key=) равный названию функции из п.2, а также добавить параметр для сортировки по убыванию. Каждый ключ словаря и его значение печатаем в файле tags.txt на новой строке в заданном формате.

Результат:
FILE: тег: #lorem, упоминаний: 7
тег: #dolor, упоминаний: 6
тег: #hendrerit, упоминаний: 5
тег: #risus, упоминаний: 4
тег: #ipsum, упоминаний: 3
тег: #diam, упоминаний: 2
тег: #felis, упоминаний: 1

Python
1
2
3
4
5
6
7
8
9
10
11
12
dictionary= {}
def fun(dictionary):
    return dictionary[i]
with open('tweets.txt') as infile:
    for line in infile:
        for word in line:
            word = line.strip().split(' ')
            if word[0][0] == '#' and word[0] not in dictionary:
                dictionary[word[0]] = 1
            if word[0][0] == '#' and word[0] in dictionary:
                dictionary[word[0]] += 1
with open('tags.txt', 'a', encoding='UTF-8') as outfile:

Не понимаю инструкцию, как 4 пункт сделать и до этого правильно ли

@Catstail · 12.12.2021, 07:18

Python
1
2
def fun(dictionary):
    return dictionary[i]

Это - двойная глупость! Во-первых, переменная i не определена, поэтому эта функция работать не будет. Во-вторых, даже если ввести i в список параметров:

Python
1
2
def fun(dictionary,i):
    return dictionary[i]

то эта функция бесполезна, ибо вызов fun(d,k) делает ровно то же самое, что d[k] (без лишнего расхода на передачу параметров).

Тебе рано браться за такие задачи. Решай что-то более простое.

@levC · 27.11.2024, 09:35

Без заведения новой функции:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
slov_tag = {}
with open('tweets.txt', encoding = 'utf-8') as f:
    for line in f:
        spisok_line = line.split()
        for i in spisok_line:
            if '#' in i:
                if i not in slov_tag:
                    slov_tag[i] = 1
                else:
                    slov_tag[i] += 1
j = sorted(slov_tag.items(), key = lambda k: k[1], reverse = True)
stroka_j = map(str,(j))
with open('tags.txt', 'w', encoding = 'utf-8') as nf:
    for i in stroka_j:
        spisok_j = i.replace("'", '').strip('()').split(',')
        print(f'тег: {spisok_j[0]}, упоминаний:{spisok_j[1]}', file = nf)

@iSmokeJC · 27.11.2024, 13:55

Сообщение от levC

if '#' in i:

Садись, два

Новые блоги и статьи Все статьи Все блоги /
Установка Qt Creator для C и C++: ставим среду, CMake и MinGW без фреймворка Qt 8Observer8 05.04.2026 Среду разработки Qt Creator можно установить без фреймворка Qt. Есть отдельный репозиторий для этой среды: https:/ / github. com/ qt-creator/ qt-creator, где можно скачать установщик, на вкладке Releases:. . .	AkelPad-скрипты, структуры, и немного лирики.. testuser2 05.04.2026 Такая программа, как AkelPad существует уже давно, и также давно существуют скрипты под нее. Тем не менее, прога живет, периодически что-то не спеша дополняется, улучшается. Что меня в первую очередь. . .	Отображение реквизитов в документе по условию и контроль их заполнения Maks 04.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "ПланированиеСпецтехники", разработанного в конфигурации КА2. Данный документ берёт данные из другого нетипового документа. . .	Фото всей Земли с борта корабля Orion миссии Artemis II kumehtar 04.04.2026 Это первое подобное фото сделанное человеком за 50 лет. Снимок называют новым вариантом легендарной фотографии «The Blue Marble» 1972 года, сделанной с борта корабля «Аполлон-17». Новое фото. . .
Вывод диалогового окна перед закрытием, если документ не проведён Maks 04.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: реализовать программный контроль на предмет проведения документа. . .	Программный контроль заполнения реквизитов табличной части документа Maks 02.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: 1. Реализовать контроль заполнения реквизита. . .	wmic не является внутренней или внешней командой Maks 02.04.2026 Решение: DISM / Online / Add-Capability / CapabilityName:WMIC~~~~ Отсюда: https:/ / winitpro. ru/ index. php/ 2025/ 02/ 14/ komanda-wmic-ne-naydena/	Программная установка даты и запрет ее изменения Maks 02.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: при создании документов установить период списания автоматически. . .