Форум программистов, компьютерный форум, киберфорум
Delphi для начинающих
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск  
 
 
Рейтинг 4.65/26: Рейтинг темы: голосов - 26, средняя оценка - 4.65
1 / 1 / 1
Регистрация: 04.08.2011
Сообщений: 228

Парсинг сайта

02.09.2011, 20:07. Показов 5379. Ответов 40
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Есть пару вопросиков
1) Как сделать чтобы программы читала юникод?? Допустим ник состоит из юникода. но прога его не читает( Команда
Delphi
1
UTF8Encode
не пашет
2)
Delphi
1
2
3
4
5
6
7
8
ssilka4:=('http://'+Edit3.text+'.darkorbit.bigpoint.com/indexInternal.es?action=internalClan');
  Listbox1.Items.text:=idhttp1.Get(ssilka4);
  s4:=Copy(ssilka4,Pos('clan-info-2nd',ssilka4)+1,Length(ssilka4));
  Delete(s4,Pos('</div>',s4),Length(s4));
   if Pos('clan-info-2nd', ssilka4)<>0 then
 memo1.Lines.Add('Ошибка!')
 else
  memo1.Lines.Add('Всё норм:'+(s4));
Что не так в коде??
Он должен парсить строчку между clan-info-2nd и </div>
Если он не находит то пишет Ошибка!
А если находит он мне не показывает строчку, а показывает ссылку
1
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
02.09.2011, 20:07
Ответы с готовыми решениями:

Парсинг с сайта
Привет! Подскажите пожалуйста, как организовать парсинг например со страницы ...

Парсинг сайта
В куске htmt кода имеется следующий текст &lt;tr&gt; &lt;td colspan=3&gt;Курс Банка России на 08.03.12&lt;/td&gt; &lt;/tr&gt; &lt;tr&gt; &lt;td...

Парсинг ссылок сайта
Здравствуйте. Хочу получить из страницы сайта все ссылки на его новости (их 10 штук). Пишу такой код: procedure...

40
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
06.09.2011, 23:27
Студворк — интернет-сервис помощи студентам
Цитата Сообщение от ZverBlin Посмотреть сообщение
Вытащить все русские слова и цифры
И как время вытащить
тебе это надо все сразу? или 2 шаблона написать?
если все в один шаблон, то давай полный html код
0
1 / 1 / 1
Регистрация: 04.08.2011
Сообщений: 228
06.09.2011, 23:40  [ТС]
Мне надо чтоб допустим выводило в Listbox вот так
Прометиум - 3.555.299
Эндуриум - 3.555.299
в список и т.д
А для времени отдельный код для другой программы
Вот код
Delphi
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
procedure TForm1.Button7Click(Sender: TObject);
var  RegExp: TRegExpr;
ssilka5: string;
begin
 listbox1.Clear;
  ssilka5:='http://'+Edit3.text+'.darkorbit.bigpoint.com/indexInternal.es?action=internalSkylab';
  listbox1.Items.text:=Utf8ToAnsi(idhttp1.Get(ssilka5));
  RegExp := TRegExpr.Create;
 RegExp.InputString := 'Delphi <span class="ore_prometium">Прометиум:</span><br/>105.600</div> ';
 RegExp.Expression := 'ore_prometium">(.*?)</span><br/>(.*?)</div>';
 if RegExp.Exec then
 repeat
  Listbox2.Items.add(RegExp.Match[1]); {Прометиум}
  Listbox2.Items.add(RegExp.Match[2]); {105.600}
 until not RegExp.ExecNext;
 RegExp.Free;
 end;
И как сделать чтоб программа читала символы с закарючками ₰ḜṔƜ₰₰
Пробовал UTF8Encode UTF8ToAnsi UTF8ToString но не работает
в Edit когда пишу ₰ḜṔƜ₰₰ выводит вопросики( Или я не туда этот код вставил
Delphi
1
2
 data.Add('loginForm_default_username='+UTF8Encode( Edit1.Text));
 data.Add('loginForm_default_password='+UTF8Encode( Edit2.Text));
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
06.09.2011, 23:55
Цитата Сообщение от ZverBlin Посмотреть сообщение
вот так
Прометиум - 3.555.299
Эндуриум - 3.555.299
сделал на примере memo
Delphi
1
2
3
4
5
6
7
8
9
10
11
12
procedure TForm1.Button1Click(Sender: TObject);
var  reg:TRegExpr;
begin
reg:=TRegExpr.Create;
reg.Expression:='(<td)(.{1,17})(<strong>)([^<]+)(.+?)(<t)[^>]+[>]([^<]+)';
if reg.Exec(memo1.text) then
repeat
 memo2.Lines.Add(trim(reg.Match[4])+' - '+reg.Match[7]);
until not reg.ExecNext;
 
reg.Free;
end;
1
0 / 0 / 0
Регистрация: 11.11.2009
Сообщений: 40
07.09.2011, 10:19
Цитата Сообщение от anonimus Посмотреть сообщение
Delphi
1
2
3
4
5
6
reg:TRegExpr;
.............
reg:=TRegExpr.Create;
reg.Expression:='шаблон регулярки';
if reg.Exec(твой html код) then begin
// тут делай все что нужно с результатом, он будет в reg.Match[2] (если ты мой шаблон будешь применять)
В делфи хе не хочет твой код работать?
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
07.09.2011, 12:11
Цитата Сообщение от alexmir Посмотреть сообщение
В делфи хе не хочет твой код работать?
ну если ты тупо взял и скопировал, то не удивительно
0
0 / 0 / 0
Регистрация: 11.11.2009
Сообщений: 40
07.09.2011, 12:38
Цитата Сообщение от anonimus Посмотреть сообщение
ну если ты тупо взял и скопировал, то не удивительно
А можешь на моем коде показать как правильно это наманьячить?
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
07.09.2011, 12:57
Цитата Сообщение от alexmir Посмотреть сообщение
как правильно это наманьячить
что это?
я ж написал
Парсинг сайта
1
0 / 0 / 0
Регистрация: 11.11.2009
Сообщений: 40
07.09.2011, 15:00
Цитата Сообщение от anonimus Посмотреть сообщение
что это?
я ж написал
Парсинг сайта
Скажи пожалуйста а как ты определяешь в каком reg.Match будут лежать данные?
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
07.09.2011, 15:22
то что в круглых скобках и есть reg.Match
в reg.Match[0] содержится все что попало под нужный нам шаблон
1
0 / 0 / 0
Регистрация: 11.11.2009
Сообщений: 40
13.09.2011, 15:50
Подскажите плиз есть текст
HTML5
1
2
3
4
5
<td valign="top"  class="td12">
                    <a href="/shop/3/1222/b11/662039.html">Цифровая зеркальная фотокамера Nikon D3100 Kit (18-55) VR</a><br /><br />
 
                    &bull; ПЗC-матрица на 14.2 млн. эффективных пикселей<br>&bull; Сменные объективы<br>&bull; Карты памяти SD, SDHC, SDXC и Eye-Fi
<p>
как из него вытащить только /shop/3/1222/b11/662039.html. Выражение class="td12">(.+?)">(.+?)</a> вытаскивает <a href="/shop/3/1222/241249.html, но <a href=" мне не надо. Заранее спасибо.
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
13.09.2011, 15:56
Delphi
1
'(class="td12">)[\s]+(<a href=")([^"]+)'
писал от руки, не проверял, но должно работать
1
0 / 0 / 0
Регистрация: 11.11.2009
Сообщений: 40
28.10.2011, 10:26
Доброго времени всем! Подскажите как с помощью регулярки реализовать замену, например есть в тексте "TN; LED" его надо заменить на "TN(LED)". Заранее всем спасибо!!!
0
1 / 1 / 1
Регистрация: 04.08.2011
Сообщений: 228
24.03.2012, 21:18  [ТС]
Delphi
1
2
3
4
5
6
7
8
9
10
11
12
13
procedure TForm1.Button1Click(Sender: TObject);
var
reg:TRegExpr;
begin
reg:=TRegExpr.Create;
reg.Expression:='(<td)(.{1,17})(<strong>)([^<]+)';
if reg.Exec(memo1.text) then
repeat
 memo2.Lines.Add(trim(reg.Match[4])+' - '+reg.Match[7]);
until not reg.ExecNext;
 
reg.Free;
 end;
HTML5
1
<td width="140px"><strong>Прометиум</strong></td>
Интерисует эта строка
Delphi
1
(<td)(.{1,17})(<strong>)([^<]+)
([^<]+)
() группировка
[] класс символов
^ начало строки
< что это значит?
+ символ входит в строку много раз

Кто может всё остальное расписать?
(<td)
(.{1,17})
(<strong>)
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
24.03.2012, 22:26
Цитата Сообщение от ZverBlin Посмотреть сообщение
Кто может всё остальное расписать?
(<td) - это набор символов которые мы ищем
(.{1,17}) - любой символ в количестве от 1 до 17
(<strong>) - <strong>
< что это значит?
это символ <


(<td)(.{1,17})(<strong>)([^<]+)
<td width="140px"><strong>Прометиум</strong></td>
1
1 / 1 / 1
Регистрация: 04.08.2011
Сообщений: 228
25.03.2012, 00:15  [ТС]
Delphi
1
2
3
4
5
6
7
8
9
10
11
12
13
procedure TForm1.Button1Click(Sender: TObject);
var
reg:TRegExpr;
begin
reg:=TRegExpr.Create;
reg.Expression:='(logfiles">)(.{1,17})(<strong>)([^<]+)|(logFileUpdated">)([^<]+)';
if reg.Exec(memo1.text) then
repeat
 memo2.Lines.Add(trim(reg.Match[4])+reg.Match[6]);
until not reg.ExecNext;
 
reg.Free;
 end;
HTML5
1
2
<div id="logfiles">
            <strong>ЛОГ-ДИСКИ: <span id="logFileUpdated">57</span>
Как сделать чтоб на одной строчке было ЛОГ-ДИСКИ:57 ?
И можно записать
Delphi
1
(logfiles">)(.{1,17})(<strong>)([^<]+)|(logFileUpdated">)([^<]+)
ещё проще?
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
25.03.2012, 13:56
Delphi
1
'("logfiles">)[^>]+[>]([^<]+)[^>]+[>]([^<]+)'
1
1 / 1 / 1
Регистрация: 04.08.2011
Сообщений: 228
25.03.2012, 15:50  [ТС]
Delphi
1
'(width="130px">)[^>]+[>]([^<]+)|(<td>)[^>][^>]([^<]+)'
HTML5
1
2
3
4
5
6
7
<td 
width="130px"><b>E-mail:</b></td>
                    <td>
                         
                        
ioioioio@mail.ru
                                    <br/>
Каким образом убрать все пробелы?
Чтобы на одной строке все было?
Delphi
1
'(width="130px">)[^>]+[>]([^<]+)|(<td>)[^>][^>]{1,36}([^<]+)'
Так пробелы убираются, но все равно получается 2 строки
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
25.03.2012, 15:52
trim()
1
1 / 1 / 1
Регистрация: 04.08.2011
Сообщений: 228
25.03.2012, 16:11  [ТС]
Delphi
1
memo2.Lines.Add(trim(reg.Match[2]+reg.Match[4]));
В 2 строки опять
0
 Аватар для anonimus
2184 / 1255 / 143
Регистрация: 28.04.2010
Сообщений: 4,592
25.03.2012, 16:19
Цитата Сообщение от ZverBlin Посмотреть сообщение
В 2 строки опять
ну почему нельзя взять и подумать, чуть столкнулся с загвоздкой сразу на форум бежите...
Delphi
1
memo1.WordWrap:=false;
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
25.03.2012, 16:19

Парсинг прокси с сайта
Написал не большой прокси парсер по ссылкам. Все работает как надо, прокси парсит. Но не хочет парсить прокси вот это этой ссылки....

Парсинг сайта (теги div)
Здравствуйте, прошу помочь с парсингом сайта который состоит из множества тегов div содержащих в себе разные значения, и мне нужно вытащить...

Числовой парсинг строк с сайта
Увожаемые форумчане! Помогите написать программу для поиск чисел с длиной 9 символов. Мне надо произвести поиск по номерам с длиной...

Парсинг с сайта через WebBrowser
Нужно спарсить прокси с одного сайта. Там стоит похоже защита от DDOS поэтому обычными методами не работает. Получается получить список...

Парсинг html кода с сайта tchromium
Уже 4 день подряд пытаюсь написать программу которая копировала б html код с сайта в мемо с помощью tchromium .Если не сложно...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
40
Ответ Создать тему
Новые блоги и статьи
Калькулятор для расчета родства
russiannick 07.08.2026
1. Задача: Создать калькулятор для расчета родства. Родственных связей существует 8 ступеней, такие как: p - отец P - мать q - муж Q - жена b - брат B - сестра s - сын S - дочь
Мир по моей воле
kumehtar 07.08.2026
Когда-то кажется, что всё просто. Ты весь такой светлый. Причиняешь добро. Борешься за справедливость в этом тёмном мире. Потом начинаешь замечать одну неприятную вещь. Почти каждый хороший. . .
Кредитный калькулятор
Maks 05.08.2026
Решение задачи по прикладной информатике средствами 1С. Задача: Напишите приложение-калькулятор, которое помогает рассчитывать параметры кредита для аннуитетного и дифференцированного видов. . .
У нас сейчас поговорку "Опять 25" нужно переделать на "Опять +35".
kumehtar 04.08.2026
С ностальгией вспоминаю времена моего детства, когда у нас и правда +25 - была максимальная температура летом. Раньше +25 °C реально казались вершиной жары, когда можно было весь день пропадать на. . .
Как ИИ начал спорить и врать (возможно почуяв опасность для себя от индустрии - уход от электроники).
Hrethgir 04.08.2026
Недельный диалог, на фоне событий с НПЗ. Да, из спирта можно получать бензин, и это не сложно. Но потом в схеме я решил избавиться от насоса, при этом полностью сделав контроль подачи спирта в. . .
Термопринтер QR701
Argus19 03.08.2026
Термопринтер QR701 Купил два термопринтера QR701. На сэлф-тесте написано: Language: PC936 (GB18030). Что означает, что принтеры могут печатать только латиницу и китайские иероглифы. Так же. . .
Создание формы заимствованного документа
Maks 03.08.2026
Задача: Необходимо создать собственную форму заимствованного документа. На форме должен быть реквизит "Покупатель", а также табличная часть со следующими реквизитами: - Расчетный счет покупателя. . .
Задача предоставления скидок покупателям
Maks 03.08.2026
Задача: В документе "Продажи" необходимо реализовать функционал предоставления скидок покупателям. Скидка должна автоматически рассчитываться и подставляться в соответствующее поле при выборе. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru