Теория. Разделение потока данных

Доброго времени суток, форумчане!

Итак, сразу к делу.
Тема моей дипломной работы "Разработка метода разделения потока данных для параллельной передачи файлов большого размера с учётом приоритетов".
Проблематика и предметная область? Есть суперкомпьютеры. На них нужно с обычных компов передавать файлы большого размера (до 10ТБ) параллельно. Канал связи ограничен своей пропускной способностью. Так как время передачи каждого из файлов очень большое - становится вопрос в приоритете их загрузки. То есть, пользователь может задать приоритет загружаемому\выгружаемому файлу, чтобы он передался или принялся быстрее и с ним можно было уже начать работать. На тот момент я просто подумал, что нужно файлы дробить на части и от одного файла передавать больше таких частей, чем от другого, вот и весь приоритет.
Окей, я выбрал протокол, который создан для передачи файлов - FTP, язык Python 3.+, покопавшись, выбрал сторонний модуль для создания ftp-сервера (модуль pyftpdlib - асинхронный ftp-сервер, очень быстрый по-сравнению с аналогами), затем для клиента взял тот же Python 3.+, PyQt 5, библиотеку ftplib для работы с сервером по ftp.
Интересная вещь в том, как я реализую приоритет сейчас. Не знаю, сработает или нет, но очень надеюсь, что да. Получается так, что асинхронный сервер работает на максимум своей производительности, то есть он не ограничивает ни одного клиента какой-то постоянной константой по скорости передачи. Скорость передачи ограничивается лишь загруженностью ftp-сервера. При передаче или приёме файлов в клиенте можно задать размер "частей" файла, которые будут передаваться при каждом "цикле\такте" передачи. То есть, загружаю два файла. Первый буду принимать кусочками по 3 Кбайта, а второй кусочками по 25 Кбайт. Очень надеюсь и верю в то, что таким образом смогу реализовать систему приоритетов.

У меня возникло 2 проблемы.
1) Этот функционал уже реализован в таком ftp-клиенте, как, например, fileZilla. Там можно задать приоритет загрузки и оно действительно грузит быстрее\медленнее. Получается, что мне нужно что-то добавить своего интересного и научного, только я не знаю что. Я думал о том, чтобы как-то автоматически расставлять приоритеты загрузкам\отгрузкам, но кроме размера файла я больше не обладаю никакой инфой, чтобы как-то в автоматическом режиме вычислять приоритет и ставить его файлам.
2) Поговорив с другими преподавателями, мне было сказано, что в моей дипломной работе нет никакой математической части. Я учусь на "прикладной математике и информатике". Сказали:"Ну в чём проблема, если человек захотел передать первым файл, пусть возьмёт, передаст сначала его, а потом другие. Где же научность работы? Ну может можно как-то автоматически метки расставлять файлам (в зависимости от типа файла), и, например, чтобы компьютер сам понимал, что все файлы с такой меткой мне нужно загрузить быстрее?! ну или что-то такое..". Проблема в том, что файлы абсолютно разные могут быть. Метки автоматом им не поставить. Только если пользователь вручную их будет ставить, а потом говорить, какая метка самая важная. Но в чём же разница тогда в сравнении с приоритетами? Это же одно и то же тогда получится...

Ребят, напишите пожалуйста свои идеи по этому поводу. Просто совсем скоро сдавать и времени на разработку не там уж и много, а ещё тестировать, анализировать результаты, придумывать метрику "довольности пользователя", рассчитывать её и всё такое.
Спасибо всем, кто не прошёл мимо!

0