Быстрая запись в файл

@ArtemFM · Регистрация: 10.09.2015

Студворк — интернет-сервис помощи студентам

В общем первым распишу задачу:

Нужно записывать в csv файл (UTF8) промежуток цифровых значений по порядку с определённым шагом... Допустим от 1.000.000 до 10.000.000 построчно с шагом 1... Если записывать стандартным методом построчно, это очень долго...

Вопрос:

есть ли возможность потоково записывать или по блокам, чтоб ускорить в разы запись???

P.S. Я не прошу дать мне решение!!! Я прошу дать мне наводку куда копать... Просто я начал изучать Java и хочу до всего дойти сам, до этого 10 лет ковырял Delphi, но там с таким не сталкивался... С такими задачами ))) Спасибо всем, кто примет участие в моём вопросе )

Pablito · 10.09.2015, 19:08

работает меньше секунды

Java
1
2
3
4
5
6
7
8
9
10
public static void main(String[] args) throws IOException {
        long s = System.currentTimeMillis();
        BufferedWriter out = new BufferedWriter(new OutputStreamWriter(new FileOutputStream("d:\\1.txt"), "UTF-8"));
        for (int i = 1000000; i <= 10000000; i++) {
            out.write(i);
        }
        out.close();
        long t = System.currentTimeMillis() - s;
        System.out.println("всего " + t + "мс");
    }

Добавлено через 6 минут
поправочка

Java
1
out.write(String.valueOf(i) + "\n");

@ArtemFM · 10.09.2015, 19:19 **[ТС]**

Спасибо огромное за ответ ) Спасибо!

@deGeneral · 10.09.2015, 21:59

Если записывать стандартным методом построчно, это очень долго...

А стандартным - это каким?
В приведенном ответе писалось как раз построчно в цикле, а вы как собирались решать эту задачу?

@ArtemFM · 25.09.2015, 13:15 **[ТС]**

Я не знаю, возможно ли такой вариант....запись по блокам... Допустим у меня винт в NTFS с размером сектора 4096 байт. Так можно ли записывать сразу блоками размером 4096 байт за раз... Или потоково в один файл... Это бы уменьшило время записи в разы... или писать сроку размера 4096 байт с разделением на строки... Я не знаю, как объяснить более подробно, что я имею ввиду, но хочется ускорить запись по максимуму от возможного. Или при построчной записи и так используется максимальная скорость винчестера?

@aleksandy · 25.09.2015, 18:10

Сообщение от Паблито

Java
1
2
3
4
5
BufferedWriter out = new BufferedWriter(...);
for (int i = 1000000; i <= 10000000; i++) {
    out.write(i);
}
out.close();

поправочка

Java
1
out.write(String.valueOf(i) + "\n");

Говнокод, так делать не надо.

Чтобы сбрасывать содержимое буфера в файл, достаточно периодически вызывать метод flush().

Java
1
2
3
4
5
6
7
8
9
10
11
12
try (
    BufferedWriter out = new BufferedWriter(
        new OutputStreamWriter(new FileOutputStream("d:\\1.txt"), "UTF-8")
    );
) {
    for (int i = 1000000; i <= 10000000; i++) {
        out.write(i);
        if (i % 1_000) {
            out.flush();
        }
    }
}

@ArtemFM · 25.09.2015, 18:46 **[ТС]**

Спасибо...вроде то, что и хотел... Спасибо за наводку.... Позже протестирую, пока в программе другая задача решается )))

Новые блоги и статьи Все статьи Все блоги /
Оттенки серого Argus19 18.03.2026 Оттенки серого Нашёл в интернете 3 прекрасных модуля: Модуль класса открытия диалога открытия/ сохранения файла на Win32 API; Модуль класса быстрого перекодирования цветного изображения в оттенки. . .	SDL3 для Desktop (MinGW): Рисуем цветные прямоугольники с помощью рисовальщика SDL3 на Си и C++ 8Observer8 17.03.2026 Содержание блога Финальные проекты на Си и на C++: finish-rectangles-sdl3-c. zip finish-rectangles-sdl3-cpp. zip	Символические и жёсткие ссылки в Linux. algri14 15.03.2026 Существует два типа ссылок — символические и жёсткие. Ссылка в Linux — это запись в каталоге, которая может указывать либо на inode «файла-ИСТОЧНИКА», тогда это будет «жёсткая ссылка» (hard link),. . .	[Owen Logic] Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора ФедосеевПавел 14.03.2026 Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора ВВЕДЕНИЕ Выполняя задание на управление насосной группой заполнения резервуара,. . .
делаю науч статью по влиянию грибов на сукцессию anaschu 13.03.2026 прикрепляю статью	SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++ 8Observer8 10.03.2026 Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:	Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE 8Observer8 10.03.2026 Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .	Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .

@ArtemFM 746 / 493 / 285 Регистрация: 10.09.2015 Сообщений: 1,530

	Быстрая запись в файл 10.09.2015, 18:42. Показов 4424. Ответов 6 Метки нет (Все метки) В общем первым распишу задачу: Нужно записывать в csv файл (UTF8) промежуток цифровых значений по порядку с определённым шагом... Допустим от 1.000.000 до 10.000.000 построчно с шагом 1... Если записывать стандартным методом построчно, это очень долго... Вопрос: есть ли возможность потоково записывать или по блокам, чтоб ускорить в разы запись??? P.S. Я не прошу дать мне решение!!! Я прошу дать мне наводку куда копать... Просто я начал изучать Java и хочу до всего дойти сам, до этого 10 лет ковырял Delphi, но там с таким не сталкивался... С такими задачами ))) Спасибо всем, кто примет участие в моём вопросе ) 0

@ArtemFM 746 / 493 / 285 Регистрация: 10.09.2015 Сообщений: 1,530
	10.09.2015, 19:19 [ТС]
	Спасибо огромное за ответ ) Спасибо! 0

@ArtemFM 746 / 493 / 285 Регистрация: 10.09.2015 Сообщений: 1,530
	25.09.2015, 13:15 [ТС]
	Я не знаю, возможно ли такой вариант....запись по блокам... Допустим у меня винт в NTFS с размером сектора 4096 байт. Так можно ли записывать сразу блоками размером 4096 байт за раз... Или потоково в один файл... Это бы уменьшило время записи в разы... или писать сроку размера 4096 байт с разделением на строки... Я не знаю, как объяснить более подробно, что я имею ввиду, но хочется ускорить запись по максимуму от возможного. Или при построчной записи и так используется максимальная скорость винчестера? 0

@ArtemFM 746 / 493 / 285 Регистрация: 10.09.2015 Сообщений: 1,530
	25.09.2015, 18:46 [ТС]
	Спасибо...вроде то, что и хотел... Спасибо за наводку.... Позже протестирую, пока в программе другая задача решается ))) 0