Форум программистов, компьютерный форум, киберфорум
Наши страницы
C# для начинающих
Войти
Регистрация
Восстановить пароль
 
 
Рейтинг 4.64/14: Рейтинг темы: голосов - 14, средняя оценка - 4.64
Outwork
4 / 4 / 3
Регистрация: 05.08.2014
Сообщений: 54
1

Прошу консультации экспертов (ООП, многопоточность)

16.11.2016, 13:02. Просмотров 2576. Ответов 45

Здравствуйте уважаемые форумчане! Давеча пытался устроиться на работу и прислали мне тестовое задание, далее привожу его текст:
Требуется написать консольную программу на C# для генерации сигнатуры указанного файла. Сигнатура генерируется следующим образом: исходный файл делится на блоки заданной длины (кроме последнего блока), для каждого блока вычисляется значение hash-функции SHA256, и вместе с его номером выводится в консоль.
Программа должна уметь обрабатывать файлы, размер которых превышает объем оперативной памяти, и при этом максимально эффективно использовать вычислительные мощности многопроцессорной системы. При работе с потоками допускается использовать только стандартные классы и библиотеки из .Net 3.5 (исключая ThreadPool, BackgroundWorker, TPL). Ожидается реализация с использованием Thread-ов. Путь до входного файла и размер блока задаются в командной строке. В случае возникновения ошибки во время выполнения программы ее текст и StackTrace необходимо вывести в консоль.
В общем посидел пару вечеров и наваял прогу на сколько позволяли знания и навыки. Поскольку ранее ничего подобного не делал, поначалу даже показалось, что задание несложное. Однако отправляя проект не оставляло ощущение, что сделал не так как надо.
Так в итоге и оказалось. Мне вежливо отказали дополнив комментариями касательно кода:
1. Вся программа в одном файле, двух классах и нескольких статических методах. ООП нет.
Классы не являются лишними, если у них есть понятная область отвественности.
В данном случае, если бы выделили класс для запуска потоков и отслеживания их завершения – то это не было бы лишним.

2.Алгоритм работы не эффективный. Файл сразу бьется на блоки и для каждого блока стартует новый поток. Все сразу. Никого thread pool нет.
Для подсчета хэша каждого блока запускается отдельный поток. Запуск потока трудоемкая операция, которая требует много ресурсов. Вариантов решения этой проблемы возможно несколько. Или реализовывать свою вариацию threadPool или использовать долгоживущие потоки.
Кроме того, сейчас никак не ограничивается число запущенных потоков. При их большом количестве, они будут бороться за процессорное время и значительная часть ресурсов будет тратиться на переключение контекстов между потоками.

3.Ожидание окончания всех потоков на Thread.Sleep
Ожидание завершения на Thread.Sleep является ресурсоемким. Поскольку основной поток, ждущий завершения, постоянно просыпается и занимает процессорное время, которое можно было потратить на обсчет следующего блока. Для решения этих проблем используют примитивы синхронизации.
Проверка окончания всех потоков происходит на статической перемерной threadCount. К ней осуществляется доступ из нескольких потоков, и доступ никак не синхронизирован.
Это стандартная проблема разделения ресурсов между и не исключена ситуация, что threadCount никогда не достигнет 0.
Собственно чтобы я хотел попросить: прокомментировать код, указать на проблемные места и предложить пример более удачной реализации. Хочу понять где слабые места и что надо подтянуть в плане знаний и навыков. Заранее всем благодарен!
0
Вложения
Тип файла: rar Program.rar (1.2 Кб, 40 просмотров)
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
Similar
Эксперт
41792 / 34177 / 6122
Регистрация: 12.04.2006
Сообщений: 57,940
16.11.2016, 13:02
Ответы с готовыми решениями:

Прошу мнения экспертов
Всем здрасте! 'Недавно начал изучать PHP' короче бла-бла-бла=) Прислали мне...

Прошу консультации!
Ребятки всем привет. Собственно чуть в краткрости раскажу.. Я всю жизнь имел...

Прошу совета экспертов о смене провайдера интернет
Здравствуйте. Сейчас тормозящий оптоволоконный ДжиПон 70 Мбит (реально до 30),...

Прошу консультации по iptables
Доброго всем времени суток! Установлена у меня ubuntu 10.04. Поставлен...

Прошу консультации в выборе!
Добрый день уважаемые форумчане! Нужна ваша квалифицированная помощь в выборе...

45
insite2012
Модератор
Эксперт .NET
4852 / 3807 / 1094
Регистрация: 12.10.2013
Сообщений: 11,096
Записей в блоге: 2
21.11.2016, 11:11 41
Цитата Сообщение от Exerion Посмотреть сообщение
у кого-то из старичков форума были сохранены эти переводы.
Вот все три.
0
Вложения
Тип файла: pdf C#_Part_1.pdf (830.5 Кб, 16 просмотров)
Тип файла: pdf C#_Part_2.pdf (930.5 Кб, 13 просмотров)
Тип файла: pdf C#_Part_3.pdf (966.5 Кб, 15 просмотров)
AlexPtr
0 / 0 / 0
Регистрация: 02.11.2015
Сообщений: 4
21.11.2016, 14:35 42
Спасибо, никогда не слышал о таком. Насчет переводов - ничего страшного, на английском почитаю.

Добавлено через 3 минуты
Знаю о том, что диск - однопоточное устройство в отличие от процессора. Вопрос был именно с точки зрения ООП.
Несмотря на некоторые отклонения от ООП, Ваш код все равно очень интересен с точки зрения многопоточности - узнал много нового.
0
movorpovor
1 / 1 / 0
Регистрация: 24.05.2015
Сообщений: 45
27.01.2017, 15:13 43
Цитата Сообщение от freeba Посмотреть сообщение
Смысл в том, что дисковая подсистема не любит когда файлы читаются в несколько потоков. В моем примере используются т.н. "тяжелые" потоки - их просто нужно запустить, а далее они сами разберутся, что нужно сделать - для взаимодействия с файловой системой им и нужен FileStreamer, который обеспечивает последовательное, поблочное чтение.

PS: Данное решение с точки зрения ООП является не очень правильным - пример уважаемого Exerion более точно соответствует парадигме, хотя и является чуть более медленным. Для обучения лучше использовать именно его.
в чем заключается более точное соответствие кода Exerion парадигме ооп?

и если не секрет, зачем в вашем коде класс ThreadParameter? почему не структура или там словарик, а именно класс?
0
freeba
Неадекват
1262 / 1061 / 202
Регистрация: 02.04.2010
Сообщений: 2,434
Записей в блоге: 2
Завершенные тесты: 2
27.01.2017, 16:47 44
Цитата Сообщение от movorpovor Посмотреть сообщение
и если не секрет, зачем в вашем коде класс ThreadParameter? почему не структура или там словарик, а именно класс?
Если это была структура, то она создавалась в FileStreamer и потом копировалась в поток обработки целиком, а т.к. используется класс в поток передается лишь ссылка на него.

Цитата Сообщение от movorpovor Посмотреть сообщение
в чем заключается более точное соответствие кода Exerion парадигме ооп?
Если подходить формально, код не использующий наследование не является соответствующим ООП парадигме. И сам код более аккуратный и компактный - для обучения он лучше подойдет.
0
movorpovor
1 / 1 / 0
Регистрация: 24.05.2015
Сообщений: 45
27.01.2017, 19:20 45
спасибо! уж не знаю кому как, а ваш код мне куда более понятнее, чем код Exerion

Добавлено через 2 часа 31 минуту
freeba а такой еще вопрос: что у вас, что у Exerion try/catch блок и трейс ошибки идут только в основном потоке. Я могу ошибаться, но вроде как и Рихтер и Альбахари утверждают, что если исключение вылетит в одном из дочерних потоков, то в главный поток она не попадет. Разве не нужно try/catch блок вынести в каждый поток отдельно?
0
freeba
Неадекват
1262 / 1061 / 202
Регистрация: 02.04.2010
Сообщений: 2,434
Записей в блоге: 2
Завершенные тесты: 2
27.01.2017, 19:35 46
Цитата Сообщение от movorpovor Посмотреть сообщение
Разве не нужно try/catch блок вынести в каждый поток отдельно?
Нет. Внутри рабочих потоков не может возникнуть исключения, соответственно отлов исключений там не нужен.
0
27.01.2017, 19:35
MoreAnswers
Эксперт
37091 / 29110 / 5898
Регистрация: 17.06.2006
Сообщений: 43,301
27.01.2017, 19:35

Прошу консультации по поводу запросов
Доброго времени, подскажите пожалуйста следующий момент, допустим у меня есть...

Прошу Вашей профессиональной консультации
Всем здравствуйте уважаемые. Помогите разобраться в логах. Не могу "вкурить"...

Прошу консультации с HP Pavilion dv6 3057er
Всем привет! Прошу консультации. Ноутбук HP Pavilion dv6 3057er. Windows 7...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
46
Ответ Создать тему
Опции темы

КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin® Version 3.8.9
Copyright ©2000 - 2018, vBulletin Solutions, Inc.
Рейтинг@Mail.ru