Получение кода web страницы

@Miks · Регистрация: 19.06.2008

Студворк — интернет-сервис помощи студентам

Всем доброго времени суток...

Задача заключается в следующем ... : есть сайт, например (http://ati.su/Tables/Default.a... tingType=2) ... там таблица, мне необходимо вырывать данные из таблицы на сайте и помещать их в свою базу ...

Нагуглил следующий код, для получения кода страницы:

C++
1
#include <NMHttp.hpp>

C++
1
2
3
4
5
6
7
8
9
void __fastcall TForm1::Button1Click(TObject *Sender)
{
   AnsiString url_site = "http://ati.su/Tables/Default.aspx?EntityType=Load&FromGeoRadius=-1&ToGeoRadius=-1&SortingType=2"; //адрес стр.
   TNMHTTP *NMHTTP = new TNMHTTP(Form1);
   TStringList *pot = new TStringList;
   NMHTTP->Get(url_site);
   pot->Text = NMHTTP->Body;
   Memo1->Lines->AddStrings(pot); // и куда нить это деваем например в Memo1
}

Насколько я понимаю данные в таблицу заполняются после выполнения java скрипта(ов) ... как можно получить код страницы с уже выполненными скриптами. ...

Либо кто знает - подскажите пожалуйста как ещё можно получить данные со страницы ...

@Miks · 07.12.2010, 21:23 **[ТС]**

Подскажите пожалуйста в какую сторону хотя бы копать?

@Gremlin · 08.12.2010, 23:06

Моно это попробывать
#include <mshtml.h>

C++
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
   TVariant x = "yandex.ru";  // сайт
    CppWebBrowser1->Navigate2(&x, NULL, NULL, NULL, NULL);
 
        while (CppWebBrowser1->ReadyState != 4) // ждет пока полностью не загрузится страница
       Application->HandleMessage();
 
       TComInterface<IHTMLDocument2> pHTMLDocument;
       TComInterface<IHTMLElement> pEl;
 
       if (S_OK != CppWebBrowser1->Document->QueryInterface(IID_IHTMLDocument2, (LPVOID*) &pHTMLDocument)) return; // запрос интерфейс документа
      
 if (S_OK != pHTMLDocument->get_body(&pEl)) return; // тело документа
 
        WideString wHtmlCode;
       pEl->get_innerHTML(&wHtmlCode); // в этой строке сохранится хтмл код

@Miks · 09.12.2010, 22:17 **[ТС]**

Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ.

НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... )))

@prosto_lynx · 07.07.2012, 21:30

Сообщение от Miks

Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ.

НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... )))

Кажется на туже самою проблему попал!... ПЛЗ! Скинь, как ты выкрутился!

Добавлено через 8 минут

Сообщение от Gremlin

Моно это попробывать...

А можно при этом получить HTML-код страницы?

@Avazart · 07.07.2012, 23:31

TNMHTTP старый компонент поэтому из-за этого может не получаться
Юзать надо IdHTTP. Ну если там JS вполне возможно что не получится и тогда действительно стоит попробывать через CppWebBrowser.

@prosto_lynx · 09.07.2012, 00:08

Но как при использовании CppWebBrowser получить HTML-код?.. Возможно ли вообще это???

@Avazart · 09.07.2012, 00:09

Я в нем не особо, должно быть свойство... мой знакомый использовал его чтоб потом парсить страницу.

Ищи... найдешь отпишись

Новые блоги и статьи Все статьи Все блоги /
Кому нужен AOT? DevAlt 26.03.2026 Решил сделать простой ланчер Написал заготовку: dotnet new console --aot -o UrlHandler var items = args. Split(":"); var tag = items; var id = items; var executable = args;. . .	Отправка уведомления на почту при изменении наименования справочника Maks 24.03.2026 Программная отправка письма электронной почты на примере изменения наименования типового справочника "Склады" в конфигурации БП3. Перед реализацией необходимо выполнить настройку системной учетной. . .	модель ЗдравоСохранения 5. Меньше увольнений- больше дохода! anaschu 24.03.2026 Теперь система здравосохранения уменьшает количество увольнений. 9TO2GP2bpX4 a42b81fb172ffc12ca589c7898261ccb/ https:/ / rutube. ru/ video/ a42b81fb172ffc12ca589c7898261ccb/ Слева синяя линия -. . .	Midnight Chicago Blues kumehtar 24.03.2026 Такой Midnight Chicago Blues, знаешь?. . Когда вечерние улицы становятся ночными, а ты не можешь уснуть. Ты идёшь в любимый старый бар, и бармен наливает тебе виски. Ты смотришь на пролетающие. . .
SDL3 для Desktop (MinGW): Вывод текста со шрифтом TTF с помощью библиотеки SDL3_ttf на Си и C++ 8Observer8 24.03.2026 Содержание блога Финальные проекты на Си и на C++: finish-text-sdl3-c. zip finish-text-sdl3-cpp. zip	Жизнь в неопределённости kumehtar 23.03.2026 Жизнь — это постоянное существование в неопределённости. Например, даже если у тебя есть список дел, невозможно дойти до точки, где всё окончательно завершено и больше ничего не осталось. В принципе,. . .	Модель здравоСохранения: работники работают быстрее после её введения. anaschu 23.03.2026 geJalZw1fLo Корпорация до введения программа здравоохранения имела много невыполненных работниками заданий, после введения программы количество заданий выросло. Но на выплатах по больничным это. . .	Контроль уникальности заводского номера Maks 23.03.2026 Алгоритм контроля уникальности заводского (или серийного) номера на примере нетипового документа выдачи шин для спецтехники с табличной частью, разработанного в конфигурации КА2. Номеклатура. . .

@Miks 8 / 8 / 0 Регистрация: 19.06.2008 Сообщений: 54
	07.12.2010, 21:23 [ТС]
	Подскажите пожалуйста в какую сторону хотя бы копать? 0

@Miks 8 / 8 / 0 Регистрация: 19.06.2008 Сообщений: 54
	09.12.2010, 22:17 [ТС]
	Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ. НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... ))) 1

@Avazart 8488 / 6155 / 615 Регистрация: 10.12.2010 Сообщений: 28,683 Записей в блоге: 30
	07.07.2012, 23:31
	TNMHTTP старый компонент поэтому из-за этого может не получаться Юзать надо IdHTTP. Ну если там JS вполне возможно что не получится и тогда действительно стоит попробывать через CppWebBrowser. 0

@prosto_lynx 49 / 25 / 2 Регистрация: 09.06.2008 Сообщений: 227
	09.07.2012, 00:08
	Но как при использовании CppWebBrowser получить HTML-код?.. Возможно ли вообще это??? 0

@Avazart 8488 / 6155 / 615 Регистрация: 10.12.2010 Сообщений: 28,683 Записей в блоге: 30
	09.07.2012, 00:09
	Я в нем не особо, должно быть свойство... мой знакомый использовал его чтоб потом парсить страницу. Ищи... найдешь отпишись 0

Получение кода web страницы

Решение