Парсинг лог файла и распараллеливание используя mpi

@andrprogr · Регистрация: 09.06.2015

собственно, есть лог-файлы вида

09/08/2009 19:05:00;Q;0.master.cluster;queue=workq
09/08/2009 19:05:01;S;0.master.cluster;user=oscartst group=oscartst jobname=shelltest queue=workq ctime=1252422300 qtime=1252422300 etime=1252422300 start=1252422301 exec_host=node26.cluster/7+node26.cluster/6+node26.cluster/5+node26.cluster/4+node26.cluster/3+node26.cluster/2+node26.cluster/1+node26.cluster/0+node25.cluster/2+node25.cluster/1+node25.cluster/0 Resource_List.cput=10000:00:00 Resource_List.ncpus=1 Resource_List.neednodes=node26.cluster:ppn=8+node25.cluster: ppn=3 Resource_List.nodect=11 Resource_List.nodes=11:ppn=1 Resource_List.walltime=10000:00:00
09/08/2009 19:05:01;E;0.master.cluster;user=oscartst group=oscartst jobname=shelltest queue=workq ctime=1252422300 qtime=1252422300 etime=1252422300 start=1252422301

Нужно сортировать по дате, выводить собственно саму дату, пользователя, время работы.
Погуглив, прихожу к выводу, что нужно использовать регулярные выражения. Для меня это темный лес. Самое интересное, нужно использовать MPI, но что у нас будет распараллеливаться? Цикл, который будет разбирать строку на нужные позиции? Куда можно вывести эти отсортированные данные, чтобы было наглядно? Я думал про XLS-файл, или же есть способ проще?

magirus · 11.01.2016, 12:21

создано во фрилансе, здесь закрыто.

@andrprogr 0 / 0 / 0 Регистрация: 09.06.2015 Сообщений: 10
		1
	Парсинг лог файла и распараллеливание используя mpi 08.01.2016, 13:37. Показов 637. Ответов 1 Метки нет (Все метки) собственно, есть лог-файлы вида 09/08/2009 19:05:00;Q;0.master.cluster;queue=workq 09/08/2009 19:05:01;S;0.master.cluster;user=oscartst group=oscartst jobname=shelltest queue=workq ctime=1252422300 qtime=1252422300 etime=1252422300 start=1252422301 exec_host=node26.cluster/7+node26.cluster/6+node26.cluster/5+node26.cluster/4+node26.cluster/3+node26.cluster/2+node26.cluster/1+node26.cluster/0+node25.cluster/2+node25.cluster/1+node25.cluster/0 Resource_List.cput=10000:00:00 Resource_List.ncpus=1 Resource_List.neednodes=node26.cluster:ppn=8+node25.cluster: ppn=3 Resource_List.nodect=11 Resource_List.nodes=11:ppn=1 Resource_List.walltime=10000:00:00 09/08/2009 19:05:01;E;0.master.cluster;user=oscartst group=oscartst jobname=shelltest queue=workq ctime=1252422300 qtime=1252422300 etime=1252422300 start=1252422301 Нужно сортировать по дате, выводить собственно саму дату, пользователя, время работы. Погуглив, прихожу к выводу, что нужно использовать регулярные выражения. Для меня это темный лес. Самое интересное, нужно использовать MPI, но что у нас будет распараллеливаться? Цикл, который будет разбирать строку на нужные позиции? Куда можно вывести эти отсортированные данные, чтобы было наглядно? Я думал про XLS-файл, или же есть способ проще? __________________ Помощь в написании контрольных, курсовых и дипломных работ, диссертаций здесь 0

magirus Почетный модератор 28035 / 15765 / 981 Регистрация: 15.09.2009 Сообщений: 67,753 Записей в блоге: 78
	11.01.2016, 12:21	2
	создано во фрилансе, здесь закрыто. 0

Опции темы