Форум программистов, компьютерный форум, киберфорум
Java SE (J2SE)
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.71/7: Рейтинг темы: голосов - 7, средняя оценка - 4.71
6 / 6 / 3
Регистрация: 12.03.2014
Сообщений: 341

Странный принцип работы CyclicBarrier (потоки)

09.12.2017, 13:28. Показов 1369. Ответов 3
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Добрый день.
Начал изучать потоки пару часов назад и уже словил странные для моего понимания вещи.

Хотел реализовать загрузку данных в несколько потоков.
Имеется 200 ссылок, по которым необходимо скачать файл. Скачивать в один поток достаточно долго и появилось желание ускорить процесс раза в 3-4.

Появилось множество вопросов:
Как запускать потоки пачками?
Как контролировать эти пачки так, чтобы всегда параллельно работало не более указанного количества потоков, например 3.

Тогда я зашёл на хабр, где и узнал про CyclicBarrier.

Для меня показалось, что можно с его помощью запустить сразу 200 потоков, где при достижении барьера лишь 3 будут избраны для того, чтобы запуститься и уйти в вечный сон, а остальные - ждать, когда их освободит барьер в очередной итерации.

При написании реализации что-то пошло не так.
Все потоки запустились, но при достижении барьера началась неразбериха.
После барьера начали высвобождаться потоки в разных количествах, что вообще для меня стало неприятным сюрпризом.

Кроме этого я узнал, что если количество оставшихся потоков не собираются в необходимое количество для барьера, то основной поток просто подвисает, что вынудило меня корректировать входные данные перед разнесением их на потоки.

И возник вопрос: как можно организовать счетчик с общей суммируемой переменной так, чтобы каждый поток мог безопасно с ней работать?
Например, В OpenMP для этого есть директива #pragma omp parallel reduction(+:counter)

Код:

Кликните здесь для просмотра всего текста

Java
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
import java.util.concurrent.BrokenBarrierException;
import java.util.concurrent.CyclicBarrier;
 
class Solver {
 
    int N;
    int [] data;
    CyclicBarrier barrier;
    int iterator;
 
    class Worker implements Runnable {
 
        private int row;
        Worker(int row){
            this.row = row;
        }
 
        public void run() {
            try {
                System.out.println("Готов обработать индекс: " + row);
                barrier.await();
                System.out.println("Обработал индекс: " + row);
            } catch (InterruptedException e) {
                e.printStackTrace();
            } catch (BrokenBarrierException e) {
                e.printStackTrace();
            }
        }
    }
 
    public Solver() {
        int packs = 3;
        N = 13;
 
        //Чтобы барьер не подвис в ожидании, сделаем количество элементов кратным количеству пачек
        if (N % packs > 0){
            int div = N / packs;
            div++;
            N = div * packs;
        }
 
        data = new int [N];
        for (int i = 0; i < N; i++){
            data[i] = i;
        }
        iterator = 0;
        barrier = new CyclicBarrier(packs,
            new Runnable() {
                public void run() {
                  System.out.println("Достигли барьера");
                }
            });
        for (int i = 0; i < N; i++){
            new Thread(new Worker(i)).start();
        }
 
    }
}


Вывод:
Кликните здесь для просмотра всего текста

Готов обработать индекс: 4
Готов обработать индекс: 0
Готов обработать индекс: 5
Готов обработать индекс: 3
Готов обработать индекс: 7
Готов обработать индекс: 6
Готов обработать индекс: 1
Достигли барьера
Готов обработать индекс: 2
Обработал индекс: 0
Достигли барьера
Обработал индекс: 7
Обработал индекс: 4
Обработал индекс: 2
Обработал индекс: 5
Обработал индекс: 3
Готов обработать индекс: 9
Достигли барьера
Обработал индекс: 9
Обработал индекс: 6
Обработал индекс: 1
Готов обработать индекс: 8
Готов обработать индекс: 10
Готов обработать индекс: 11
Достигли барьера
Готов обработать индекс: 12
Обработал индекс: 8
Обработал индекс: 11
Обработал индекс: 10
Готов обработать индекс: 14
Готов обработать индекс: 13
Достигли барьера
Обработал индекс: 13
Обработал индекс: 14
Обработал индекс: 12

Process finished with exit code 0

0
Лучшие ответы (1)
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
09.12.2017, 13:28
Ответы с готовыми решениями:

Cобытийность. Принцип использования и принцип работы событий в jQ и GCT
Добрый день. Подготавливаюсь к собеседованию по чеклисту и не могу найти ответ на вопрос: событийность. Принцип использования и принцип...

Не работает корректно повторное использование CyclicBarrier
Всем привет, у меня не корректно работает повторное использование CyclicBarrier. package com.mycompany.CyclicBarrier1; import...

Принцип работы ОУ в DC-DC
Подскажите как работает нижний по схеме ОУ. А то не как не пойму. Светодиоды по моему вообще неправильно подключены. Транзистор открывается...

3
502 / 348 / 134
Регистрация: 14.06.2016
Сообщений: 669
09.12.2017, 15:06
Лучший ответ Сообщение было отмечено Bolbine84455 как решение

Решение

Семафором только по три пропускай до барьера.
https://docs.oracle.com/javase... phore.html
1
6 / 6 / 3
Регистрация: 12.03.2014
Сообщений: 341
10.12.2017, 16:27  [ТС]
Цитата Сообщение от vcrop Посмотреть сообщение
Семафором только по три пропускай до барьера.
https://docs.oracle.com/javase... phore.html
Переписал простой пример для себя:
Кликните здесь для просмотра всего текста

Java
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
import java.util.concurrent.Semaphore;
 
public class SemaphoreTest {
 
    private static Integer count = 0;
 
    private static final Semaphore SEMAPHORE = new Semaphore(3, true);
 
    public static void main(String[] args) throws InterruptedException {
        for (int i = 1; i <= 7; i++) {
            new Thread(new Worker(i)).start();
        }
    }
 
    public static class Worker implements Runnable {
        private int id;
 
        public Worker(int id) {
            this.id = id;
        }
 
        @Override
        public void run() {
            System.out.printf("Поток №%d запущен.\n", id);
            try {
                SEMAPHORE.acquire();
 
                Thread.sleep(5000);
 
                synchronized (count) {
                    count++;
                }
 
                SEMAPHORE.release();
 
                System.out.printf("Поток №%d выполнился, вернув результат %d.\n", id, count);
 
            } catch (InterruptedException e) {
            }
        }
    }
}


Получил следующий вывод

Кликните здесь для просмотра всего текста

Поток №1 запущен.
Поток №5 запущен.
Поток №6 запущен.
Поток №7 запущен.
Поток №3 запущен.
Поток №4 запущен.
Поток №2 запущен.
Поток №6 выполнился, вернув результат 3.
Поток №5 выполнился, вернув результат 3.
Поток №1 выполнился, вернув результат 3.
Поток №3 выполнился, вернув результат 6.
Поток №4 выполнился, вернув результат 6.
Поток №7 выполнился, вернув результат 6.
Поток №2 выполнился, вернув результат 7.


Можно ли как-то "сгладить" сложение?

Хочется увидеть в отладке плавный вывод увеличения переменной count: 1,2,3,4...
0
502 / 348 / 134
Регистрация: 14.06.2016
Сообщений: 669
10.12.2017, 23:18
Java
1
2
3
4
5
6
7
8
9
synchronized (System.out) {
 
     count++;
 
     SEMAPHORE.release();
 
     System.out.printf("Поток №%d выполнился, вернув результат %d.\n", id, count);
 
}
Integer финальный класс. После count++ в переменной будет другой экземпляр и следующие потоки будут захватывать уже
монитор другого объекта.

Или так, или используй AtomicInteger как счетчик.
1
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
10.12.2017, 23:18
Помогаю со студенческими работами здесь

Принцип работы
ЗДравствуйте, первый вопрос по поводу выпадающего списка - его можно создать только через dropdownlist? И еще,пожалуйста,помогите...

Принцип работы Service
Здравствуйте, господа. Не могу понять, что еще может Service, кроме перегружаемых методов? При первом запуске в onStartService или...

Принцип работы OpenCart
У меня такой вопрос еще. Есть папка с файлами, лежащая на сервере. Когда вводишь адрес домена в браузере, то насколько я понимаю сначала...

Принцип работы p-n перехода
В интернете много чего написано, но объясните, пожалуйста доступно, в чем же он заключается.

Принцип работы коммутатора
Подскажите пожалуйста, есть интернет 150 Мбит/с, по шнуру выдает заявленные 150, по вайфай 40 на компьютере и 200 на айфоне, ну тут...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
4
Ответ Создать тему
Новые блоги и статьи
Ритм жизни
kumehtar 27.02.2026
Иногда приходится жить в ритме, где дел становится всё больше, а вовлечения в происходящее — всё меньше. Плотный график не даёт вниманию закрепиться ни на одном событии. Утро начинается с быстрых,. . .
SDL3 для Web (WebAssembly): Сборка SDL3 и Box2D из исходников с помощью CMake и Emscripten
8Observer8 27.02.2026
Недавно вышла версия 3. 4. 2 библиотеки SDL3. На странице официальной релиза доступны исходники, готовые DLL (для x86, x64, arm64), а также библиотеки для разработки под Android, MinGW и Visual Studio. . . .
SDL3 для Web (WebAssembly): Реализация движения на Box2D v3 - трение и коллизии с повёрнутыми стенами
8Observer8 20.02.2026
Содержание блога Box2D позволяет легко создать главного героя, который не проходит сквозь стены и перемещается с заданным трением о препятствия, которые можно располагать под углом, как верхнее. . .
Конвертировать закладки radiotray-ng в m3u-плейлист
damix 19.02.2026
Это можно сделать скриптом для PowerShell. Использование . \СonvertRadiotrayToM3U. ps1 <path_to_bookmarks. json> Рядом с файлом bookmarks. json появится файл bookmarks. m3u с результатом. # Check if. . .
Семь CDC на одном интерфейсе: 5 U[S]ARTов, 1 CAN и 1 SSI
Eddy_Em 18.02.2026
Постепенно допиливаю свою "многоинтерфейсную плату". Выглядит вот так: https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11617&stc=1&d=1771445347 Основана на STM32F303RBT6. На борту пять. . .
Камера Toupcam IUA500KMA
Eddy_Em 12.02.2026
Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
И ясному Солнцу
zbw 12.02.2026
И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.
«Знание-Сила»
zbw 12.02.2026
«Знание-Сила» «Время-Деньги» «Деньги -Пуля»
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru