Форум программистов, компьютерный форум, киберфорум
С++ для начинающих
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск  
 
 
Рейтинг 4.82/22: Рейтинг темы: голосов - 22, средняя оценка - 4.82
0 / 0 / 0
Регистрация: 17.01.2014
Сообщений: 13

Параллельная обработка файлов

14.01.2015, 20:35. Показов 4851. Ответов 25
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Не понимаю как организовать параллельную обработку файлов в данной программе.
Смысл в том что есть папка в которой идут txt файлы, в этих файлах есть числа, мы считываем из файла число и выводим в консоль рядом с названием файла, а затем считаем сумму всех чисел.
C++
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
#define _CRT_SECURE_NO_WARNINGS
#include <iostream>
#include <string>
#include <vector>
#include <boost\filesystem.hpp>
#include <boost\filesystem\fstream.hpp>
#include <boost\thread\thread.hpp>
 
 
using namespace std;
namespace fs = boost::filesystem;
 
int main()
{   
    setlocale(LC_ALL, "rus");
    vector<int> values;
    FILE* txt;
    fs::path path("c:\\text");
 
    int result = 0;
 
    cout << "Введите путь к файлам (*.txt): ";
    cin >> path;
    cout << endl;
 
    for (fs::directory_iterator it(path); it != fs::directory_iterator(); ++it)
    {
        if (it->path().extension() == ".txt")
        {
            fs::ifstream ifs(*it);
            if (ifs.is_open())
            {
                int val;
                ifs >> val;
                values.push_back(val);
                cout << it->path().filename() << ":" << val << endl;
                txt = fopen(it->path().string().c_str(), "r");
                fclose(txt);
            }
            else
                cerr << "Ошибка!" << endl;
        }
    }
 
    boost::this_thread::sleep(boost::posix_time::milliseconds(100));
 
    if (values.empty())
    {
        cerr << "Ошибка! Чисел нет!" << endl;
    }
    else
    {
        for (int i = 0; i < values.size(); i++)
        {
            result = values[i] + result;
        }
        cout << "Сумма всех чисел: " << result << endl;
    }
 
    system("pause");
    return 0;
}
0
Лучшие ответы (1)
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
14.01.2015, 20:35
Ответы с готовыми решениями:

Параллельная обработка
Добрый день! Подскажите, пожалуйста, как параллельно считать содержимое всех файлов из директории?

Чтение строки неограниченной длины и её параллельная обработка
Здравствуйте. В ходе реализации алгоритма для поиска возникла проблема в том, что в условии написано, что входная строка может быть сколь...

Параллельная обработка файлов
Здравствуйте. Подскажите пожалуйста как на с++ реализовать обработку файлов параллельно в несколько потоков. Например, если дано много...

25
 Аватар для DiffEreD
1458 / 795 / 257
Регистрация: 21.06.2011
Сообщений: 1,740
Записей в блоге: 2
15.01.2015, 13:34
Студворк — интернет-сервис помощи студентам
Поправочка:
C++
1
2
3
4
5
6
7
8
9
10
long long sum = 0;
   using iter = std::vector<fs::path>::const_iterator;
   iter start = files.begin();
   for (; start < files.end() - block_size; start += block_size) {
      futures.push_back(boost::async(boost::launch::async, bloc_calc<iter>, start, start + block_size));
   }
   sum += bloc_calc(start, files.cend());
 
   for (auto& f : futures) sum += f.get();
   std::cout << "Sum of all sums of all numbers into all txt files: " << sum << "\n";
0
0 / 0 / 0
Регистрация: 17.01.2014
Сообщений: 13
15.01.2015, 14:53  [ТС]
Enno, брокер?

Добавлено через 35 минут
За ответы спасибо, понял что пока что я слишком слаб чтобы выполнять такие задания, нужно почитать книг и практиковаться. Тему можно закрыть.
0
 Аватар для Voivoid
710 / 283 / 16
Регистрация: 31.03.2013
Сообщений: 1,340
15.01.2015, 17:42
Сомнительная идея параллельно читать несколько файлов. Имеет смысл читать их один за другим, а вот вычисления уже можно производить параллельно
1
419 / 418 / 72
Регистрация: 27.05.2012
Сообщений: 1,168
15.01.2015, 18:49
Voivoid, чего сомнительного то?
0
 Аватар для Voivoid
710 / 283 / 16
Регистрация: 31.03.2013
Сообщений: 1,340
16.01.2015, 09:43
Цитата Сообщение от Кудаив Посмотреть сообщение
Voivoid, чего сомнительного то?
А то, что скорее всего производительность не просто не увеличится, а наоборот еще и уменьшится, причем в разы
0
0 / 0 / 0
Регистрация: 15.10.2015
Сообщений: 54
22.01.2017, 14:20
а как сделать обработку ошибок в случае , если файлов нет или путь неверно указан?
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
22.01.2017, 14:20

Параллельная обработка очереди файлов
Добрый день! Подскажите пожалуйста, каким образом лучше решить следующую задачу: Имеется папка, в которой периодически будут...

Параллельная обработка нескольких файлов в потоках, обрабатывается только последний
Добрый день! У меня следующая задача. Мне необходимо конвертировать бинарные файлы в нормальный с помощью внешней программы,...

Параллельная обработка изображений
Добрый день, на данный момент начал изучение темы параллельных вычислений. Написал простую программу, которая меняет изображение на...

Параллельная обработка данных
Здравствуйте) Помогите найти суть проблемы. У меня реализован класс поставщик/потребитель для обработки блоков байтов размером в 1 мб....

Параллельная обработка односвязных списков
Здравствуйте! Помогите, пожалуйста, с решением вот такой задачи: Демонстрационная программа содержит: поток,...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
26
Ответ Создать тему
Новые блоги и статьи
тв 16 бой ии
anaschu 27.07.2026
Великий Перелом ИИ: Как уравнения ОДУ Radau дожали цензурные фильтры Алисы Фиксируем в мемофонде Теории Всего беспрецедентный факт в истории ИИ-зондирования. В затяжном многораундовом. . .
мв 15. непроверенное, возможно, глюк
anaschu 27.07.2026
НАУЧНО-АНАЛИТИЧЕСКИЙ ОТЧЕТ. РАЗДЕЛ 1. 1: «НАУКА» (РАСШИРЕННАЯ СТЕХИОМЕТРИЧЕСКАЯ И ГЕНЕТИЧЕСКАЯ ВЕРСИЯ)Тема: Теоретическое обоснование инвариантности 19-мерного тензорного ядра непрерывных ОДУ и. . .
Очистка реквизитов и табличных частей документа при копировании
Maks 26.07.2026
Алгоритм из решения ниже разработан на примере нетипового документа "ЗаявкаНаРаботу", разработанного в КА2. Задача: Заменить алгоритм запрета копирования документов для сотрудников с ролью "Стажер",. . .
Доктрина интенционального знания - Доктрина для портала "Срез".
Hrethgir 25.07.2026
Может найдётся кто захочет оценить доктрину. . . Написания правил участия для меня роскошь, требующая лимита времени, поэтому все сообщения не прошедшие модерацию будут видны только участникам портала,. . .
сукцессия 44. Решил подать на припринт в межународные сервисы препринтов. Но нужно одобрение от ученых
anaschu 25.07.2026
Английский вариант. Пока кто то не одобрит мою личность, мне не получиться это опубликовать на препринте. Но заявку на публикацию статьи я сегодня подам.
сукцессия 43. Вторая научная статья за месяц- прайминг и гатгил
anaschu 25.07.2026
две стороны одной монеты
Более приземисто - Эстафету хвоста в .cdl (деревья эстафеты в сад).
Hrethgir 24.07.2026
В будущем, после написания блока инверсии обхода дерева (эстафеты хвоста), я планирую вернуться к нашему прошлому разговору о том, обладают ли знания целеполаганием. Тогда я пришел к выводу, что. . .
Вот представьте что вам дали бессмертие.
kumehtar 24.07.2026
Вот представьте что вам дали бессмертие, ничего более не меняя. Вообще ничего, только бессмертие в нынешнем виде. Рады были бы? Что бы вы тут делали всё это время? Никакой пенсии. Никакого нового. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru