Форум программистов, компьютерный форум, киберфорум
Наши страницы
C# для начинающих
Войти
Регистрация
Восстановить пароль
 
 
Outwork
4 / 4 / 3
Регистрация: 05.08.2014
Сообщений: 54
#1

Прошу консультации экспертов (ООП, многопоточность) - C#/.NET 4.x

16.11.2016, 13:02. Просмотров 2464. Ответов 45

Здравствуйте уважаемые форумчане! Давеча пытался устроиться на работу и прислали мне тестовое задание, далее привожу его текст:
Требуется написать консольную программу на C# для генерации сигнатуры указанного файла. Сигнатура генерируется следующим образом: исходный файл делится на блоки заданной длины (кроме последнего блока), для каждого блока вычисляется значение hash-функции SHA256, и вместе с его номером выводится в консоль.
Программа должна уметь обрабатывать файлы, размер которых превышает объем оперативной памяти, и при этом максимально эффективно использовать вычислительные мощности многопроцессорной системы. При работе с потоками допускается использовать только стандартные классы и библиотеки из .Net 3.5 (исключая ThreadPool, BackgroundWorker, TPL). Ожидается реализация с использованием Thread-ов. Путь до входного файла и размер блока задаются в командной строке. В случае возникновения ошибки во время выполнения программы ее текст и StackTrace необходимо вывести в консоль.
В общем посидел пару вечеров и наваял прогу на сколько позволяли знания и навыки. Поскольку ранее ничего подобного не делал, поначалу даже показалось, что задание несложное. Однако отправляя проект не оставляло ощущение, что сделал не так как надо.
Так в итоге и оказалось. Мне вежливо отказали дополнив комментариями касательно кода:
1. Вся программа в одном файле, двух классах и нескольких статических методах. ООП нет.
Классы не являются лишними, если у них есть понятная область отвественности.
В данном случае, если бы выделили класс для запуска потоков и отслеживания их завершения – то это не было бы лишним.

2.Алгоритм работы не эффективный. Файл сразу бьется на блоки и для каждого блока стартует новый поток. Все сразу. Никого thread pool нет.
Для подсчета хэша каждого блока запускается отдельный поток. Запуск потока трудоемкая операция, которая требует много ресурсов. Вариантов решения этой проблемы возможно несколько. Или реализовывать свою вариацию threadPool или использовать долгоживущие потоки.
Кроме того, сейчас никак не ограничивается число запущенных потоков. При их большом количестве, они будут бороться за процессорное время и значительная часть ресурсов будет тратиться на переключение контекстов между потоками.

3.Ожидание окончания всех потоков на Thread.Sleep
Ожидание завершения на Thread.Sleep является ресурсоемким. Поскольку основной поток, ждущий завершения, постоянно просыпается и занимает процессорное время, которое можно было потратить на обсчет следующего блока. Для решения этих проблем используют примитивы синхронизации.
Проверка окончания всех потоков происходит на статической перемерной threadCount. К ней осуществляется доступ из нескольких потоков, и доступ никак не синхронизирован.
Это стандартная проблема разделения ресурсов между и не исключена ситуация, что threadCount никогда не достигнет 0.
Собственно чтобы я хотел попросить: прокомментировать код, указать на проблемные места и предложить пример более удачной реализации. Хочу понять где слабые места и что надо подтянуть в плане знаний и навыков. Заранее всем благодарен!
0
Вложения
Тип файла: rar Program.rar (1.2 Кб, 40 просмотров)
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
Similar
Эксперт
41792 / 34177 / 6122
Регистрация: 12.04.2006
Сообщений: 57,940
16.11.2016, 13:02
Я подобрал для вас темы с готовыми решениями и ответами на вопрос .NET 4.x Прошу консультации экспертов (ООП, многопоточность) (C#):

Прошу мнения экспертов
Всем здрасте! 'Недавно начал изучать PHP' короче бла-бла-бла=) Прислали мне...

Прошу консультации!
Ребятки всем привет. Собственно чуть в краткрости раскажу.. Я всю жизнь имел...

Прошу совета экспертов о смене провайдера интернет
Здравствуйте. Сейчас тормозящий оптоволоконный ДжиПон 70 Мбит (реально до 30),...

Прошу консультации по iptables
Доброго всем времени суток! Установлена у меня ubuntu 10.04. Поставлен...

Прошу консультации в выборе!
Добрый день уважаемые форумчане! Нужна ваша квалифицированная помощь в выборе...

Прошу консультации по поводу запросов
Доброго времени, подскажите пожалуйста следующий момент, допустим у меня есть...

45
insite2012
Модератор
Эксперт .NET
4794 / 3753 / 1081
Регистрация: 12.10.2013
Сообщений: 10,991
Записей в блоге: 2
21.11.2016, 11:11 #41
Цитата Сообщение от Exerion Посмотреть сообщение
у кого-то из старичков форума были сохранены эти переводы.
Вот все три.
0
Вложения
Тип файла: pdf C#_Part_1.pdf (830.5 Кб, 16 просмотров)
Тип файла: pdf C#_Part_2.pdf (930.5 Кб, 13 просмотров)
Тип файла: pdf C#_Part_3.pdf (966.5 Кб, 15 просмотров)
AlexPtr
0 / 0 / 0
Регистрация: 02.11.2015
Сообщений: 4
21.11.2016, 14:35 #42
Спасибо, никогда не слышал о таком. Насчет переводов - ничего страшного, на английском почитаю.

Добавлено через 3 минуты
Знаю о том, что диск - однопоточное устройство в отличие от процессора. Вопрос был именно с точки зрения ООП.
Несмотря на некоторые отклонения от ООП, Ваш код все равно очень интересен с точки зрения многопоточности - узнал много нового.
0
movorpovor
1 / 1 / 0
Регистрация: 24.05.2015
Сообщений: 45
27.01.2017, 15:13 #43
Цитата Сообщение от freeba Посмотреть сообщение
Смысл в том, что дисковая подсистема не любит когда файлы читаются в несколько потоков. В моем примере используются т.н. "тяжелые" потоки - их просто нужно запустить, а далее они сами разберутся, что нужно сделать - для взаимодействия с файловой системой им и нужен FileStreamer, который обеспечивает последовательное, поблочное чтение.

PS: Данное решение с точки зрения ООП является не очень правильным - пример уважаемого Exerion более точно соответствует парадигме, хотя и является чуть более медленным. Для обучения лучше использовать именно его.
в чем заключается более точное соответствие кода Exerion парадигме ооп?

и если не секрет, зачем в вашем коде класс ThreadParameter? почему не структура или там словарик, а именно класс?
0
freeba
Неадекват
1222 / 1024 / 193
Регистрация: 02.04.2010
Сообщений: 2,359
Записей в блоге: 2
Завершенные тесты: 2
27.01.2017, 16:47 #44
Цитата Сообщение от movorpovor Посмотреть сообщение
и если не секрет, зачем в вашем коде класс ThreadParameter? почему не структура или там словарик, а именно класс?
Если это была структура, то она создавалась в FileStreamer и потом копировалась в поток обработки целиком, а т.к. используется класс в поток передается лишь ссылка на него.

Цитата Сообщение от movorpovor Посмотреть сообщение
в чем заключается более точное соответствие кода Exerion парадигме ооп?
Если подходить формально, код не использующий наследование не является соответствующим ООП парадигме. И сам код более аккуратный и компактный - для обучения он лучше подойдет.
0
movorpovor
1 / 1 / 0
Регистрация: 24.05.2015
Сообщений: 45
27.01.2017, 19:20 #45
спасибо! уж не знаю кому как, а ваш код мне куда более понятнее, чем код Exerion

Добавлено через 2 часа 31 минуту
freeba а такой еще вопрос: что у вас, что у Exerion try/catch блок и трейс ошибки идут только в основном потоке. Я могу ошибаться, но вроде как и Рихтер и Альбахари утверждают, что если исключение вылетит в одном из дочерних потоков, то в главный поток она не попадет. Разве не нужно try/catch блок вынести в каждый поток отдельно?
0
freeba
Неадекват
1222 / 1024 / 193
Регистрация: 02.04.2010
Сообщений: 2,359
Записей в блоге: 2
Завершенные тесты: 2
27.01.2017, 19:35 #46
Цитата Сообщение от movorpovor Посмотреть сообщение
Разве не нужно try/catch блок вынести в каждый поток отдельно?
Нет. Внутри рабочих потоков не может возникнуть исключения, соответственно отлов исключений там не нужен.
0
27.01.2017, 19:35
MoreAnswers
Эксперт
37091 / 29110 / 5898
Регистрация: 17.06.2006
Сообщений: 43,301
27.01.2017, 19:35
Привет! Вот еще темы с решениями:

Прошу Вашей профессиональной консультации
Всем здравствуйте уважаемые. Помогите разобраться в логах. Не могу "вкурить"...

Прошу консультации с HP Pavilion dv6 3057er
Всем привет! Прошу консультации. Ноутбук HP Pavilion dv6 3057er. Windows 7...

Тестирование компонентов по даташиту. Прошу консультации
Рассмотрим предлагаемые тесты в даташите на мосфет FR9024N (в качестве примера).

Выбор библиотеки для работы с *.pdf прошу консультации
Всем добрый день. Возникла потребность редактирования pdf джавой. Погуглив,...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
46
Ответ Создать тему
Опции темы

КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin® Version 3.8.9
Copyright ©2000 - 2018, vBulletin Solutions, Inc.
Рейтинг@Mail.ru