Получение кода web страницы

@Miks · Регистрация: 19.06.2008

Студворк — интернет-сервис помощи студентам

Всем доброго времени суток...

Задача заключается в следующем ... : есть сайт, например (http://ati.su/Tables/Default.a... tingType=2) ... там таблица, мне необходимо вырывать данные из таблицы на сайте и помещать их в свою базу ...

Нагуглил следующий код, для получения кода страницы:

C++
1
#include <NMHttp.hpp>

C++
1
2
3
4
5
6
7
8
9
void __fastcall TForm1::Button1Click(TObject *Sender)
{
   AnsiString url_site = "http://ati.su/Tables/Default.aspx?EntityType=Load&FromGeoRadius=-1&ToGeoRadius=-1&SortingType=2"; //адрес стр.
   TNMHTTP *NMHTTP = new TNMHTTP(Form1);
   TStringList *pot = new TStringList;
   NMHTTP->Get(url_site);
   pot->Text = NMHTTP->Body;
   Memo1->Lines->AddStrings(pot); // и куда нить это деваем например в Memo1
}

Насколько я понимаю данные в таблицу заполняются после выполнения java скрипта(ов) ... как можно получить код страницы с уже выполненными скриптами. ...

Либо кто знает - подскажите пожалуйста как ещё можно получить данные со страницы ...

@Miks · 07.12.2010, 21:23 **[ТС]**

Подскажите пожалуйста в какую сторону хотя бы копать?

@Gremlin · 08.12.2010, 23:06

Моно это попробывать
#include <mshtml.h>

C++
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
   TVariant x = "yandex.ru";  // сайт
    CppWebBrowser1->Navigate2(&x, NULL, NULL, NULL, NULL);
 
        while (CppWebBrowser1->ReadyState != 4) // ждет пока полностью не загрузится страница
       Application->HandleMessage();
 
       TComInterface<IHTMLDocument2> pHTMLDocument;
       TComInterface<IHTMLElement> pEl;
 
       if (S_OK != CppWebBrowser1->Document->QueryInterface(IID_IHTMLDocument2, (LPVOID*) &pHTMLDocument)) return; // запрос интерфейс документа
      
 if (S_OK != pHTMLDocument->get_body(&pEl)) return; // тело документа
 
        WideString wHtmlCode;
       pEl->get_innerHTML(&wHtmlCode); // в этой строке сохранится хтмл код

@Miks · 09.12.2010, 22:17 **[ТС]**

Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ.

НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... )))

@prosto_lynx · 07.07.2012, 21:30

Сообщение от Miks

Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ.

НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... )))

Кажется на туже самою проблему попал!... ПЛЗ! Скинь, как ты выкрутился!

Добавлено через 8 минут

Сообщение от Gremlin

Моно это попробывать...

А можно при этом получить HTML-код страницы?

@Avazart · 07.07.2012, 23:31

TNMHTTP старый компонент поэтому из-за этого может не получаться
Юзать надо IdHTTP. Ну если там JS вполне возможно что не получится и тогда действительно стоит попробывать через CppWebBrowser.

@prosto_lynx · 09.07.2012, 00:08

Но как при использовании CppWebBrowser получить HTML-код?.. Возможно ли вообще это???

@Avazart · 09.07.2012, 00:09

Я в нем не особо, должно быть свойство... мой знакомый использовал его чтоб потом парсить страницу.

Ищи... найдешь отпишись

Новые блоги и статьи Все статьи Все блоги /
Access VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.	Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .	Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .	Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .	Создание Single Page Application на фреймах krapotkin 16.11.2025 Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .	Фото: Daniel Greenwood kumehtar 13.11.2025

@Miks 8 / 8 / 0 Регистрация: 19.06.2008 Сообщений: 54
	07.12.2010, 21:23 [ТС]
	Подскажите пожалуйста в какую сторону хотя бы копать? 0

@Miks 8 / 8 / 0 Регистрация: 19.06.2008 Сообщений: 54
	09.12.2010, 22:17 [ТС]
	Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ. НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... ))) 1

@Avazart 8484 / 6151 / 615 Регистрация: 10.12.2010 Сообщений: 28,683 Записей в блоге: 30
	07.07.2012, 23:31
	TNMHTTP старый компонент поэтому из-за этого может не получаться Юзать надо IdHTTP. Ну если там JS вполне возможно что не получится и тогда действительно стоит попробывать через CppWebBrowser. 0

@prosto_lynx 49 / 25 / 2 Регистрация: 09.06.2008 Сообщений: 227
	09.07.2012, 00:08
	Но как при использовании CppWebBrowser получить HTML-код?.. Возможно ли вообще это??? 0

@Avazart 8484 / 6151 / 615 Регистрация: 10.12.2010 Сообщений: 28,683 Записей в блоге: 30
	09.07.2012, 00:09
	Я в нем не особо, должно быть свойство... мой знакомый использовал его чтоб потом парсить страницу. Ищи... найдешь отпишись 0

Получение кода web страницы

Решение