|
0 / 0 / 0
Регистрация: 15.10.2017
Сообщений: 2
|
|
Взять уникальную строку с файла (большой файл)15.10.2017, 21:27. Показов 707. Ответов 4
Метки нет (Все метки)
Есть тхт-файл больше 10 млн. строк При каждом вызове скрипта нужно брать уникальную строчку Первое что пришло в голову это разбить файл на более мелкие (можно даже по папкам разложить) И рандомно брать строки с удалением. Но это не сильно подходит  Из-за рандомности строки в каких-то файлах могут закончиться быстрее чем в других, а обращения будут продолжаться к этим файлам.Что можно еще сделать с большим файлом? Чтоб все работало быстро (производительность важна!)
0
|
|
(| 15.10.2017, 21:27 | |
|
Ответы с готовыми решениями:
4
Как получить уникальную строку из множество записей? |
 4925 / 3920 / 1620
Регистрация: 24.04.2014
Сообщений: 11,441
|
||
| 15.10.2017, 21:37 | ||
0
|
||
Сообщение от AlexUA83
|
0 / 0 / 0
Регистрация: 15.10.2017
Сообщений: 2
|
||
| 15.10.2017, 21:43 [ТС] | ||
брать рандомно строки не совсем то, что нужно хотелось бы брать уникальные строки (по порядку или может с удалением строк)
0
|
||
|
4925 / 3920 / 1620
Регистрация: 24.04.2014
Сообщений: 11,441
|
|||
| 15.10.2017, 21:52 | |||
0
|
|||
78 / 78 / 35
Регистрация: 08.09.2013
Сообщений: 397
|
||
| 16.10.2017, 10:33 | ||
Сначала берем рандомно первый символ, потом рандомно строку из конкретного файла, получатся в 42 раза быстрее 
0
|
||
| 16.10.2017, 10:33 | |
|
Помогаю со студенческими работами здесь
5
Скопировать большой файл, например, фильм, в другой файл. После копирования размер файла должны совпадать Используя число и unix время получить уникальную 7-ми знаковую строку Взять строку из файла Как взять строку из файла
Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
Очистка реквизитов документа при копировании
Maks 09.04.2026
Алгоритм из решения ниже применим как для типовых, так и для нетиповых документов на самых различных конфигурациях.
Задача: при копировании документа очищать определенные реквизиты и табличную. . .
|
модель ЗдравоСохранения 8. Подготовка к разному выполнению заданий
anaschu 08.04.2026
https:/ / github. com/ shumilovas/ med2. git
main ветка * содержимое блока дэлэй из старой модели теперь внутри зайца новой модели
8ATzM_2aurI
|
Блокировка документа от изменений, если он открыт у другого пользователя
Maks 08.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в конфигурации КА2.
Задача: запретить редактирование документа, если он открыт у другого пользователя.
/ / . . .
|
Система безопасности+живучести для сервера-слоя интернета (сети). Двойная привязка.
Hrethgir 08.04.2026
Далее были размышления о системе безопасности. Сообщения с наклонным текстом - мои.
А как нам будет можно проверить, что ссылка наша, а не подделана хулиганами, которая выбросит на другую ветку и. . .
|
|
Модель ЗдрввоСохранения 7: больше работников, больше ресурсов.
anaschu 08.04.2026
работников и заданий может быть сколько угодно, но настроено всё так, что используется пока что только 20%
kYBz3eJf3jQ
|
Дальние перспективы сервера - слоя сети с космологическим дизайном интефейса карты и логики.
Hrethgir 07.04.2026
Дальнейшее ближайшее планирование вывело к размышлениям над дальними перспективами. И вот тут может быть даже будут нужны оценки специалистов, так как в дальних перспективах всё может очень сильно. . .
|
Горе от ума
kumehtar 07.04.2026
Эта мне ментальная установка, что вот прямо сейчас, мол, мне для полного счастья не хватает (нужное вписать), и когда я этого достигну - тогда и полный кайф. Одна из самых сильных ловушек на пути. . . .
|
Использование значений реквизитов справочника в документе, с определенными условиями и правами
Maks 07.04.2026
1. Контроль срока действия договора
Алгоритм из решения ниже реализован на примере нетипового документа "ЗаявкаНаРаботу", разработанного в конфигурации КА2.
Задача: уведомлять пользователя, если. . .
|