Как при выводе в файл на Python увеличить размер буфера?

@Testfor · Регистрация: 04.08.2022

Студворк — интернет-сервис помощи студентам

При записи в файлы питон записывает данные не целиком, а по блокам.
Например, если выполнить вот этот код

Python
1
2
t=open('File.txt','w',encoding='utf-8')
t.write('0'*8190)

то получится пустой файл.

А если выполнить этот код

Python
1
2
t=open('File.txt','w',encoding='utf-8')
t.write('0'*8200)

то получится файл, в котором 8200 нулей.

Очевидно, что бы слишком часто не образаться к диску, питон небольшие изменения файлов накапливает в оперативной памяти,
а когда их суммарный размер превышает 8KB, заносит на диск. Вопрос в следующем - как увеличить размер этого буфера? Например, что бы данные заносились на диск каждые 8 мегабайт. В моём случае это нужно для уменьшения дефрагментации и я реализую это через отдельный массив. А существует ли способ увеличить уже имеющийся буфер?

@Welemir1 · 24.01.2023, 19:22

Testfor, а не вариант просто сначала накопить данные в нужном объеме,а потом записать? Или это ты и делаешь через массивы?

Добавлено через 2 минуты

Сообщение от Testfor

нужно для уменьшения дефрагментации

памяти? диска ССД

?

@Testfor · 24.01.2023, 19:39 **[ТС]**

Welemir1, Это нужно для уменьшения дефрагментации диска, так как я сейчас использую сортировку слиянием для сортировки очень больших наборов данных. Сперва делю строки на множество файлов, а потом эти файлы сливаю. Соответственно если записывать по 8КБ за раз, каждый гигабайт будет на 130 тысяч частей распыляться. Да, сейчас я просто накапливаю строки для каждого файла в массиве, а когда его размер превышает N, сохраняю в файл. Вопрос в том как не изобретать велосипед и увеличить уже встроеный буфер.

@Welemir1 · 24.01.2023, 19:57

Testfor, вряд ли тут кто-то занимался таким делом, я бы на твоем месте сразу пошел в документацию по работе с файлами.
А еще -не вариант использовать для сортировок нумпи/панду? они поверх С работают, умеют сами многопоточно обрабатывать и писать, это не быстрее будет?
и еще есть библиотека array -настоящий массив в традиционном понимании, так вот она умеет из коробки большие объемы данных писать на диск очень быстро, речь о гигабайтах, возможно тоже интересно тебе почитать будет.

Новые блоги и статьи Все статьи Все блоги /
BOINC: 22 года — и всё ещё работает Programma_Boinc 12.03.2026 BOINC: 22 года — и всё ещё работает Дэвид Андерсон написал ретроспективу. Кратко: в 2001 году он ушёл из United Devices, где был CTO, и за несколько месяцев написал ядро BOINC — клиент, сервер,. . .	SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++ 8Observer8 10.03.2026 Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:	Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE 8Observer8 10.03.2026 Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .	Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .
Модульная разработка через nuget packages DevAlt 07.03.2026 Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .	Модульный подход на примере F# DevAlt 06.03.2026 В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .	Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование 8Observer8 05.03.2026 Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .	SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D 8Observer8 04.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .

@Testfor 2 / 2 / 1 Регистрация: 04.08.2022 Сообщений: 59
	24.01.2023, 19:39 [ТС]
	Welemir1, Это нужно для уменьшения дефрагментации диска, так как я сейчас использую сортировку слиянием для сортировки очень больших наборов данных. Сперва делю строки на множество файлов, а потом эти файлы сливаю. Соответственно если записывать по 8КБ за раз, каждый гигабайт будет на 130 тысяч частей распыляться. Да, сейчас я просто накапливаю строки для каждого файла в массиве, а когда его размер превышает N, сохраняю в файл. Вопрос в том как не изобретать велосипед и увеличить уже встроеный буфер. 0

@Welemir1 Автоматизируй это! 7391 / 4818 / 1246 Регистрация: 30.03.2015 Сообщений: 13,693 Записей в блоге: 29
	24.01.2023, 19:57
	Testfor, вряд ли тут кто-то занимался таким делом, я бы на твоем месте сразу пошел в документацию по работе с файлами. А еще -не вариант использовать для сортировок нумпи/панду? они поверх С работают, умеют сами многопоточно обрабатывать и писать, это не быстрее будет? и еще есть библиотека array -настоящий массив в традиционном понимании, так вот она умеет из коробки большие объемы данных писать на диск очень быстро, речь о гигабайтах, возможно тоже интересно тебе почитать будет. 1