Запись и чтение большого файла или области на диске

доброе время суток.

если вопрос не по топику то подскажите где могут на него ответить.

итак, представьте. что есть миллион товаров и есть миллион групп. каждый товар входит в группу, либо не входит в группу. данная информация должна быть представлена в файле таким способом.

товары/группы группа 1 | группа 2 | гпуппа 3 |.....|группа 1000000
товар 1__________1________0_________1_________ _____1
товар 2__________1________0_________0_________ _____0
товар 3__________0________1_________1_________ _____0
...
товар 1000000____0________0_________1_________ _____1

1 - товар пренадлежит группе
0 - товар не пренадлежит к группе

естественно что подобный файл будет иметь размер в районе терабайта и обычными методами работать в нем будет невозможно. подскажите есть ли какой то способ достать сразу определенную строку или определенный столбец и точно также оперативно изменить определенную строку или столбец.

или если нет то может возможно как то данную задумку спроэцировать прямо на сам жесткий диск и создать там какой-то условно говоря сектор, который будет выглядеть как матрица, где биты по х будут означать группу, а по у - товар?

заранее благодярен за помощь!

0

это извращение какое то. для таких целей есть базы данных.

0

дело в том что такая база в которой таблицы будут иметь такое кол-во записей ляжет. может я чего-то не знаю, но я сомневаюсь что подобные вещи будут работать быстро

0

то есть база ляжет а вы напишите программу которая не ляжет? думаю вы сможете на этом норм заработать тогда

Добавлено через 21 минуту
миллион записей в таблице для БД чуть меньше чем ничто. У некоторых продуктов пишется по миллиону записей в час

0