Найти определенные фразы в файле и посчитать их долю в общем количестве фраз

@deniskad · Регистрация: 12.04.2018

Студворк — интернет-сервис помощи студентам

Есть файл (выгруженный лог запросов): https://yadi.sk/d/A-98NjcA3TktXp

1. Необходимо вывести все запросы, содержащиеся в столбце request, которые содержат определенное слово (например "хостинг").
2. Посчитать долю этих запросов в общем количестве запросов в столбце request

Подскажите команды.

Рыжий Лис · 12.04.2018, 06:24

Хм... 400 Мб... Скиньте несколько десятков строчек из файла сюда.

@deniskad · 12.04.2018, 06:52 **[ТС]**

Строка 1: timestamp datetime device numdoc region request urls
Строка 2: 1520974800 2018-03-14 00:00 desktop 277053268 191 https://yandex.ru/search/?text=sad story скачать бесплатно mp3 в хорошем качестве&rl=416 http://mp3party.net/music/8507... ad%20story
Строка 3: 1520974800 2018-03-14 00:00 touch 19987730 2 https://yandex.ru/search/?text=ольгино баня&flag=l6707 http://www.bani.spb.ru/olgino.... ya-olgino/
Строка 4: 1520974800 2018-03-14 00:00 desktop 106605468 213 https://yandex.ru/search/?text=нужно ли мыть гречку перед варкой&id=hYYVGyK1cLWHo94T&client=980022

Рыжий Лис · 12.04.2018, 07:08

Python
1
2
3
4
5
6
7
8
9
10
t = '''\
timestamp datetime device numdoc region request urls
1520974800 2018-03-14 00:00 desktop 277053268 191 https://yandex.ru/search/?text=sad&rl=416 http://mp3party.net/music/8507899;ht...%20sad%20story
1520974800 2018-03-14 00:00 touch 19987730 2 https://yandex.ru/search/?text=ольгино http://www.bani.spb.ru/olgino.html;h.../banya-olgino/'''
 
for line in t.split('\n'):
    bits = line.rsplit(' ', 2)
    # print(bits)
    data, request, urls = bits
    print(request)

Добавлено через 2 минуты
А, там табы... Тогда bits = line.split('\t')

@deniskad · 12.04.2018, 08:47 **[ТС]**

Спасибо.

А как можно вывести все строки из файла, которые содержат определенное слово? А затем посчитать их долю относительно всех строк.

Рыжий Лис · 12.04.2018, 09:06

Если есть под рукой линукс:

Bash
1
2
grep word file.log
grep word file.log | wc -l

@deniskad · 12.04.2018, 09:49 **[ТС]**

Нет. Именно в Python.

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++ 8Observer8 10.03.2026 Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:	Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE 8Observer8 10.03.2026 Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .	Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .	Модульная разработка через nuget packages DevAlt 07.03.2026 Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .
Модульный подход на примере F# DevAlt 06.03.2026 В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .	Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование 8Observer8 05.03.2026 Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .	SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D 8Observer8 04.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .	SDL3 для Web (WebAssembly): Идентификация объектов на Box2D v3 - использование userData и событий коллизий 8Observer8 02.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-collision-events-sdl3-c. zip Сканируйте QR-код на мобильном и вы увидите, что появится джойстик для управления главным героем. . . .

@deniskad 0 / 0 / 0 Регистрация: 12.04.2018 Сообщений: 4

	Найти определенные фразы в файле и посчитать их долю в общем количестве фраз 12.04.2018, 05:58. Показов 1591. Ответов 6 Метки нет (Все метки) Есть файл (выгруженный лог запросов): https://yadi.sk/d/A-98NjcA3TktXp 1. Необходимо вывести все запросы, содержащиеся в столбце request, которые содержат определенное слово (например "хостинг"). 2. Посчитать долю этих запросов в общем количестве запросов в столбце request Подскажите команды. 0

Рыжий Лис Просто Лис 5973 / 3735 / 1099 Регистрация: 17.05.2012 Сообщений: 10,791 Записей в блоге: 9
	12.04.2018, 06:24
	Хм... 400 Мб... Скиньте несколько десятков строчек из файла сюда. 0

@deniskad 0 / 0 / 0 Регистрация: 12.04.2018 Сообщений: 4
	12.04.2018, 06:52 [ТС]
	Строка 1: timestamp datetime device numdoc region request urls Строка 2: 1520974800 2018-03-14 00:00 desktop 277053268 191 https://yandex.ru/search/?text=sad story скачать бесплатно mp3 в хорошем качестве&rl=416 http://mp3party.net/music/8507... ad%20story Строка 3: 1520974800 2018-03-14 00:00 touch 19987730 2 https://yandex.ru/search/?text=ольгино баня&flag=l6707 http://www.bani.spb.ru/olgino.... ya-olgino/ Строка 4: 1520974800 2018-03-14 00:00 desktop 106605468 213 https://yandex.ru/search/?text=нужно ли мыть гречку перед варкой&id=hYYVGyK1cLWHo94T&client=980022 0

@deniskad 0 / 0 / 0 Регистрация: 12.04.2018 Сообщений: 4
	12.04.2018, 08:47 [ТС]
	Спасибо. А как можно вывести все строки из файла, которые содержат определенное слово? А затем посчитать их долю относительно всех строк. 0

@deniskad 0 / 0 / 0 Регистрация: 12.04.2018 Сообщений: 4
	12.04.2018, 09:49 [ТС]
	Нет. Именно в Python. 0