Чтение файла и занесение данных в БД

@osdohtem · Регистрация: 30.11.2012

Студворк — интернет-сервис помощи студентам

Здравствуйте, столкнулся с задачей, данные из .txt файла необходимо занести в бд, в целом с интерфейсом занесения в бд разобрался, но возникли сами проблемы с чтением файла.
Пример самого файла:

ID-префикса (первая строчка будет зарезервирована под префикс)
Проба пера
Тут у нас идёт содержимое темы и прочий текст для наполнения
Кодовая фраза которая может находиться в любом части текста

Дополнительная проба пера
Тут у нас идёт содержимое темы и прочий текст для наполнения
Кодовая фраза которая может находиться в любом части текста

Дополнительная проба пера
Тут у нас идёт содержимое темы и прочий текст для наполнения
Кодовая фраза которая может находиться в любом части текста

Дополнительная проба пера
Тут у нас идёт содержимое темы и прочий текст для наполнения
Кодовая фраза которая может находиться в любом части текста

Дополнительная проба пера
Тут у нас идёт содержимое темы и прочий текст для наполнения
Кодовая фраза которая может находиться в любом части текста

Как определить первую строку файла? В целом можно подсчитать при помощи file(), но если файл будет большой, это ведь в любом случае сильно скажется на производительности скрипта в целом, может есть другие варианты?
И вопрос второй, занесение в ДБ будет происходить по следующему алгоритму, первая строка это заголовок темы, начиная со следующей строки и вплоть до пустой строки (пустая строка служит как разделитель) идёт как содержимое темы, как можно узнать на какой строке остановился парсер, чтобы продолжить выполнение работы со следующей строки?

@alpex · 30.11.2012, 04:33

так а что считать, считываете файл в массив функцией file() и в первой ячейке массива будет первая строчка

@osdohtem · 30.11.2012, 04:54 **[ТС]**

alpex, ясно, а вот как указать, чтобы подсчёт данных "заголовка" и "содержимого темы" шёл уже после второй строчки?

@alpex · 30.11.2012, 05:17

при помощи array_shift() вынимаете первую строку в переменную

@osdohtem · 30.11.2012, 05:47 **[ТС]**

alpex, спасибо, я просто уже решил начать обработку в цикле, начиная со второй строки, array_shift намного проще.

@osdohtem · 03.12.2012, 08:19 **[ТС]**

Возникла ещё одна проблемка, как определять эту самую пустую строку? \r\n\r\n?) Вроде как бред же

Добавлено через 15 минут
И ещё вопрос, по примеру текстового файла выше, как можно считать правильно содержимое строк в нужном мне порядке (1-ая строка до переноса — 1 часть, 2-ая строка до пустой строки, 2-ая часть)? Если кто предоставит пример, будет вообще великолепно.

@alpex · 03.12.2012, 08:49

у функции file() есть флаги, посмотрите в мануале
или можно использовать trim()

@osdohtem · 03.12.2012, 09:44 **[ТС]**

alpex, а каким образом мне может помочь флаг FILE_SKIP_EMPTY_LINES? В целом никаким же, мне наоборот пустая строка служит как делитель на массивы.
Я просто на данном этапе впал в ступор, мне надо разделять строки и сами абзац

@alpex · 03.12.2012, 10:25

у вас же по 3 строчки идет все, вы что не можете поделить на массивы по 3 строки?

@osdohtem · 03.12.2012, 10:47 **[ТС]**

alpex, 3 строчки как образец, в рабочем варианте строк может быть безгранично, просто всегда будет так, что первая строка — заголовок и она будет без переносов, то-есть всегда одной строкой, а вот всё что после неё и до пустой строки, там может быть уже сколько угодно текста

@alpex · 03.12.2012, 11:05

ок

PHP
1
2
3
4
5
6
7
8
$file = file('test.txt');
 
foreach ($file as $line){
    $line = trim($line);
    if (empty($line)){
        echo 'пустая строка';
    }
}

Добавлено через 3 минуты
ну а вобще я думаю , что во всем должен быть порядок, если писать по 3 строки все то будет намного проще

@osdohtem · 03.12.2012, 12:10 **[ТС]**

alpex, мы видимо не до конца друг друга понимаем, но буду благодарен, если вы поможете кодом.
Структура файла в первом посте, но строк может быть неограниченно, массив разделяется \n\n, первая строка массива у нас — $title, а всё что первой и до конца массива — $message, затем это всё в массиве надо помещать в бд.

Добавлено через 19 минут

PHP
1
2
3
4
5
6
7
8
9
<?
$s = file_get_contents('file.txt');
$arr = explode("\n\n",$s);
for($i=0,$n=sizeof($arr);$i<$n;$i++){
$arr[$i] = explode("\n",$arr[$i]);
$title = $arr[$i][0];
array_shift($arr[$i]);
}
?>

Получился такой код, но он не то что нужно, после вызова array_shift я уже не могу никак извлечь заголовок.

@alpex · 03.12.2012, 12:24

я тут что то ничего не понял, давайте еще раз с начала
1. мы считываем файл
2. первую строку файла выносим в отдельную переменную
3. из остального делаеммногомерный массив, который должен состоять из массивов из 2 ячеек, 1 ячейка-title , 2ячейка - text
4. ограничителями между массивами является пустая строка
т.е на выходе должен получится примерно такой массив

PHP
1
2
3
4
5
6
7
$array = array([0] => array('title' => 'тема1',
                            'text' => 'текст1'),
               [1] => array('title' => 'тема2',
                            'text' => 'текст2'),
               [2] => array('title' => 'тема3',
                            'text' => 'текст3')
               );

правильно я понял?

@osdohtem · 03.12.2012, 12:49 **[ТС]**

alpex, ага, но задачу я для себя упростил, теперь в файле не надо отдельно считывать первую строчку, просто всё подряд и да, массив многомерный, первая ячейка однострочна, вторая многострочна.
Можно пример вашего кода, который выше выдал такой результат?

@alpex · 03.12.2012, 13:10

Кликните здесь для просмотра всего текста

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
<?php
error_reporting(-1);
$result = array();
$file = file('file.txt', FILE_IGNORE_NEW_LINES);
$flag = TRUE;
$i = 0;
for ($j = 0, $cnt = count($file); $j < $cnt; $j ++){
    
    if ($flag === TRUE){
        $result[$i]['title'] = $file[$j];
        $result[$i]['text'] = '';
        $flag = FALSE;
    } elseif (empty($file[$j])) {
        $i ++;
        $flag = TRUE;
    } else {
        $result[$i]['text'] .= $file[$j];
    }
}
echo '<pre>';
var_dump($result);

или вот так что бы в тексте переводы строк остались

Кликните здесь для просмотра всего текста

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
$result = array();
$file = file('file.txt');
$flag = TRUE;
$result = array();
$i = 0;
for ($j = 0, $cnt = count($file); $j < $cnt; $j ++){
    
    if ($flag === TRUE){
        $result[$i]['title'] = $file[$j];
        $result[$i]['text'] = '';
        $flag = FALSE;
    } elseif (trim($file[$j]) == '') {
        $i ++;
        $flag = TRUE;
    } else {
        $result[$i]['text'] .= $file[$j];
    }
}

@osdohtem · 03.12.2012, 13:25 **[ТС]**

alpex, второй вариант с ошибкой, массив копируется, но в целом всё превосходно, спасибо большое

@alpex · 03.12.2012, 13:33

2 нормальный я проверял, просто нужно сначала первый удалить что б второй проверить, а не 2 сразу запускать

Добавлено через 5 минут
кстати если id нужно с первой строки считать вставьте после

PHP
1
$file = file('file.txt');

эту строку

PHP
1
2
3
$id = array_shift($file);
или 
$result['id'] = array_shift($file);

@osdohtem · 03.12.2012, 13:37 **[ТС]**

Сообщение от alpex

2 нормальный я проверял, просто нужно сначала первый удалить что б второй проверить, а не 2 сразу запускать

хехе) как-раз много дублей всплывает, проверил ещё раз, в любом случае спасибо, главное опыт получен)

@alpex · 03.12.2012, 13:45

сбросте ваш txt файл на котором вы проверяете

@osdohtem · 03.12.2012, 13:55 **[ТС]**

Нету смысла создавать новой темы, так как вопрос так же по данному скрипту, почему-то конструкция in_array не работает, в целом есть кодовая фраза, если она есть, то к началу $title добавляем ту саму кодовую фразу, но in_array по массиву ничего не находит, то что регистрозависимый поиск — знаю, поэтому всё учтено.

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Реализация движения на Box2D v3 - трение и коллизии с повёрнутыми стенами 8Observer8 20.02.2026 Содержание блога Box2D позволяет легко создать главного героя, который не проходит сквозь стены и перемещается с заданным трением о препятствия, которые можно располагать под углом, как верхнее. . .	Конвертировать закладки radiotray-ng в m3u-плейлист damix 19.02.2026 Это можно сделать скриптом для PowerShell. Использование . \СonvertRadiotrayToM3U. ps1 <path_to_bookmarks. json> Рядом с файлом bookmarks. json появится файл bookmarks. m3u с результатом. # Check if. . .	Семь CDC на одном интерфейсе: 5 U[S]ARTов, 1 CAN и 1 SSI Eddy_Em 18.02.2026 Постепенно допиливаю свою "многоинтерфейсную плату". Выглядит вот так: https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11617&stc=1&d=1771445347 Основана на STM32F303RBT6. На борту пять. . .	Камера Toupcam IUA500KMA Eddy_Em 12.02.2026 Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
И ясному Солнцу zbw 12.02.2026 И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.	«Знание-Сила» zbw 12.02.2026 «Знание-Сила» «Время-Деньги» «Деньги -Пуля»	SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 12.02.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .	SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 11.02.2026 Содержание блога Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .

@alpex 603 / 578 / 103 Регистрация: 16.07.2012 Сообщений: 1,762
	30.11.2012, 04:33
	так а что считать, считываете файл в массив функцией file() и в первой ячейке массива будет первая строчка 0

@osdohtem 0 / 0 / 0 Регистрация: 30.11.2012 Сообщений: 43
	30.11.2012, 04:54 [ТС]
	alpex, ясно, а вот как указать, чтобы подсчёт данных "заголовка" и "содержимого темы" шёл уже после второй строчки? 0

@alpex 603 / 578 / 103 Регистрация: 16.07.2012 Сообщений: 1,762
	30.11.2012, 05:17
	при помощи array_shift() вынимаете первую строку в переменную 1

@osdohtem 0 / 0 / 0 Регистрация: 30.11.2012 Сообщений: 43
	30.11.2012, 05:47 [ТС]
	alpex, спасибо, я просто уже решил начать обработку в цикле, начиная со второй строки, array_shift намного проще. 0

@osdohtem 0 / 0 / 0 Регистрация: 30.11.2012 Сообщений: 43
	03.12.2012, 08:19 [ТС]
	Возникла ещё одна проблемка, как определять эту самую пустую строку? \r\n\r\n?) Вроде как бред же Добавлено через 15 минут И ещё вопрос, по примеру текстового файла выше, как можно считать правильно содержимое строк в нужном мне порядке (1-ая строка до переноса — 1 часть, 2-ая строка до пустой строки, 2-ая часть)? Если кто предоставит пример, будет вообще великолепно. 0

@alpex 603 / 578 / 103 Регистрация: 16.07.2012 Сообщений: 1,762
	03.12.2012, 08:49
	у функции file() есть флаги, посмотрите в мануале или можно использовать trim() 0

@osdohtem 0 / 0 / 0 Регистрация: 30.11.2012 Сообщений: 43
	03.12.2012, 09:44 [ТС]
	alpex, а каким образом мне может помочь флаг FILE_SKIP_EMPTY_LINES? В целом никаким же, мне наоборот пустая строка служит как делитель на массивы. Я просто на данном этапе впал в ступор, мне надо разделять строки и сами абзац 0

@alpex 603 / 578 / 103 Регистрация: 16.07.2012 Сообщений: 1,762
	03.12.2012, 10:25
	у вас же по 3 строчки идет все, вы что не можете поделить на массивы по 3 строки? 0

@osdohtem 0 / 0 / 0 Регистрация: 30.11.2012 Сообщений: 43
	03.12.2012, 10:47 [ТС]
	alpex, 3 строчки как образец, в рабочем варианте строк может быть безгранично, просто всегда будет так, что первая строка — заголовок и она будет без переносов, то-есть всегда одной строкой, а вот всё что после неё и до пустой строки, там может быть уже сколько угодно текста 0

@osdohtem 0 / 0 / 0 Регистрация: 30.11.2012 Сообщений: 43
	03.12.2012, 12:49 [ТС]
	alpex, ага, но задачу я для себя упростил, теперь в файле не надо отдельно считывать первую строчку, просто всё подряд и да, массив многомерный, первая ячейка однострочна, вторая многострочна. Можно пример вашего кода, который выше выдал такой результат? 0

@osdohtem 0 / 0 / 0 Регистрация: 30.11.2012 Сообщений: 43
	03.12.2012, 13:25 [ТС]
	alpex, второй вариант с ошибкой, массив копируется, но в целом всё превосходно, спасибо большое 0

@alpex 603 / 578 / 103 Регистрация: 16.07.2012 Сообщений: 1,762
	03.12.2012, 13:45
	сбросте ваш txt файл на котором вы проверяете 0

@osdohtem 0 / 0 / 0 Регистрация: 30.11.2012 Сообщений: 43
	03.12.2012, 13:55 [ТС]
	Нету смысла создавать новой темы, так как вопрос так же по данному скрипту, почему-то конструкция in_array не работает, в целом есть кодовая фраза, если она есть, то к началу $title добавляем ту саму кодовую фразу, но in_array по массиву ничего не находит, то что регистрозависимый поиск — знаю, поэтому всё учтено. 0