Форум программистов, компьютерный форум, киберфорум
PHP
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 5.00/5: Рейтинг темы: голосов - 5, средняя оценка - 5.00
> /dev/null
 Аватар для Блеф
286 / 119 / 86
Регистрация: 14.05.2014
Сообщений: 767

Как правильно организовать обработку данных

23.08.2015, 11:37. Показов 986. Ответов 2
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Здравствуйте!
Ситуация такая, нужно обработать ~9 000 страниц. А после чего сохранить в 24 отдельных файла. Данный процесс будет происходить каждый день.
Вопрос. Так как ОЗУ ограниченно как правильно организовать скрипт?

Думал сохранять промежуточные данные в бд, но что будет с бд если каждый день будет удаляться и добавляться такое количество записей? Планирую купить простенький VPS 256-512 мб ОЗУ
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
23.08.2015, 11:37
Ответы с готовыми решениями:

Как правильно организовать базу данных
Пишу сайт-портфолио. Помогите как правильно организовать базу данных. Хочу сделать примерно так: главная страница - обзор всех видов...

Подскажите как правильно организовать базу данных
Есть таблица с информацией о работнике (id_работника и т.д.). Есть расписание, в котором я хочу указывать в какое время, какая команда...

Как правильно организовать ввод данных
Есть база FireBird 2.0 Пишу клинент в Delphi 7. Требуется вывести из базы некоторые данные в таблицу и в этой же таблице производить...

2
Эксперт PHP
5755 / 4134 / 1508
Регистрация: 06.01.2011
Сообщений: 11,276
23.08.2015, 12:59
Вы имеете в виду страницы в интернете? Или файлы-страницы?
Хотя достаточно освобождать ресурсы после обработки каждой страницы (ещё зависит, сколько они "весят"). Очищать переменные, удалять лишнее и т.п.
0
365 / 372 / 89
Регистрация: 01.12.2013
Сообщений: 1,629
23.08.2015, 14:55
Цитата Сообщение от bleef159 Посмотреть сообщение
но что будет с бд если каждый день будет удаляться и добавляться такое количество записей?
она ничего не заметит. индексы только при добавлении такого количества отключайте.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
23.08.2015, 14:55
Помогаю со студенческими работами здесь

Как правильно организовать хранение данных?
Добрый день! Прошу совета. Есть база Mysql. Есть класс типа Машина В него входит несколько подклассов (Модель, Цвет, Параметры). ...

Создать текстовый файл с произвольной информацией.Организовать обработку данных
В файле имеется информация о владельце автомобиля:ФИО;адрес;марка;номер телефона.Нужно вывести данные про автомобили какой-либо марки.

Организовать чтение и обработку данных из файла в соответствии с индивидуальным заданием
Помогите, пожалуйста! Задание:создать текстовый файл с произвольной информацией. Организовать просмотр содержимого файла. Организовать...

Как правильно организовать структуру хранения данных
Добрый день! Прошу совета по базам данных. есть задача логистики деталей со склада на участок и обратно. как правильно организовать...

ДНК - Как правильно организовать ввод и вывод данных
Для начала заметим,что поскольку по условию решение всегда существует,то количество букв каждого вида в первой строке равно количеству...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
3
Ответ Создать тему
Новые блоги и статьи
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL3_image
8Observer8 10.02.2026
Содержание блога Библиотека SDL3_image содержит инструменты для расширенной работы с изображениями. Пошагово создадим проект для загрузки изображения формата PNG с альфа-каналом (с прозрачным. . .
Установка Qt-версии Lazarus IDE в Debian Trixie Xfce
volvo 10.02.2026
В общем, достали меня глюки IDE Лазаруса, собранной с использованием набора виджетов Gtk2 (конкретно: если набирать текст в редакторе и вызвать подсказку через Ctrl+Space, то после закрытия окошка. . .
SDL3 для Web (WebAssembly): Работа со звуком через SDL3_mixer
8Observer8 08.02.2026
Содержание блога Пошагово создадим проект для загрузки звукового файла и воспроизведения звука с помощью библиотеки SDL3_mixer. Звук будет воспроизводиться по клику мышки по холсту на Desktop и по. . .
SDL3 для Web (WebAssembly): Основы отладки веб-приложений на SDL3 по USB и Wi-Fi, запущенных в браузере мобильных устройств
8Observer8 07.02.2026
Содержание блога Браузер Chrome имеет средства для отладки мобильных веб-приложений по USB. В этой пошаговой инструкции ограничимся работой с консолью. Вывод в консоль - это часть процесса. . .
SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве
8Observer8 02.02.2026
Содержание блога Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .
Философия технологии
iceja 01.02.2026
На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .
SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf
8Observer8 01.02.2026
Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .
SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли
8Observer8 30.01.2026
Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru