Получение кода web страницы

@Miks · Регистрация: 19.06.2008

Студворк — интернет-сервис помощи студентам

Всем доброго времени суток...

Задача заключается в следующем ... : есть сайт, например (http://ati.su/Tables/Default.a... tingType=2) ... там таблица, мне необходимо вырывать данные из таблицы на сайте и помещать их в свою базу ...

Нагуглил следующий код, для получения кода страницы:

C++
1
#include <NMHttp.hpp>

C++
1
2
3
4
5
6
7
8
9
void __fastcall TForm1::Button1Click(TObject *Sender)
{
   AnsiString url_site = "http://ati.su/Tables/Default.aspx?EntityType=Load&FromGeoRadius=-1&ToGeoRadius=-1&SortingType=2"; //адрес стр.
   TNMHTTP *NMHTTP = new TNMHTTP(Form1);
   TStringList *pot = new TStringList;
   NMHTTP->Get(url_site);
   pot->Text = NMHTTP->Body;
   Memo1->Lines->AddStrings(pot); // и куда нить это деваем например в Memo1
}

Насколько я понимаю данные в таблицу заполняются после выполнения java скрипта(ов) ... как можно получить код страницы с уже выполненными скриптами. ...

Либо кто знает - подскажите пожалуйста как ещё можно получить данные со страницы ...

@Miks · 07.12.2010, 21:23 **[ТС]**

Подскажите пожалуйста в какую сторону хотя бы копать?

@Gremlin · 08.12.2010, 23:06

Моно это попробывать
#include <mshtml.h>

C++
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
   TVariant x = "yandex.ru";  // сайт
    CppWebBrowser1->Navigate2(&x, NULL, NULL, NULL, NULL);
 
        while (CppWebBrowser1->ReadyState != 4) // ждет пока полностью не загрузится страница
       Application->HandleMessage();
 
       TComInterface<IHTMLDocument2> pHTMLDocument;
       TComInterface<IHTMLElement> pEl;
 
       if (S_OK != CppWebBrowser1->Document->QueryInterface(IID_IHTMLDocument2, (LPVOID*) &pHTMLDocument)) return; // запрос интерфейс документа
      
 if (S_OK != pHTMLDocument->get_body(&pEl)) return; // тело документа
 
        WideString wHtmlCode;
       pEl->get_innerHTML(&wHtmlCode); // в этой строке сохранится хтмл код

@Miks · 09.12.2010, 22:17 **[ТС]**

Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ.

НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... )))

@prosto_lynx · 07.07.2012, 21:30

Сообщение от Miks

Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ.

НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... )))

Кажется на туже самою проблему попал!... ПЛЗ! Скинь, как ты выкрутился!

Добавлено через 8 минут

Сообщение от Gremlin

Моно это попробывать...

А можно при этом получить HTML-код страницы?

@Avazart · 07.07.2012, 23:31

TNMHTTP старый компонент поэтому из-за этого может не получаться
Юзать надо IdHTTP. Ну если там JS вполне возможно что не получится и тогда действительно стоит попробывать через CppWebBrowser.

@prosto_lynx · 09.07.2012, 00:08

Но как при использовании CppWebBrowser получить HTML-код?.. Возможно ли вообще это???

@Avazart · 09.07.2012, 00:09

Я в нем не особо, должно быть свойство... мой знакомый использовал его чтоб потом парсить страницу.

Ищи... найдешь отпишись

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf 8Observer8 01.02.2026 Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .	SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли 8Observer8 30.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .	SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm 8Observer8 30.01.2026 Содержание блога Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .	SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .
Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .	SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .	SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL3_image 8Observer8 27.01.2026 Содержание блога SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .	Влияние грибов на сукцессию anaschu 26.01.2026 Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .

@Miks 8 / 8 / 0 Регистрация: 19.06.2008 Сообщений: 54
	07.12.2010, 21:23 [ТС]
	Подскажите пожалуйста в какую сторону хотя бы копать? 0

@Miks 8 / 8 / 0 Регистрация: 19.06.2008 Сообщений: 54
	09.12.2010, 22:17 [ТС]
	Уже решил эту проблемму, только не успел отписаться ... правда немногоу подругому чуть позже выложу свой способ. НО СПАСИБО БОЛЬШОЕ за то что откликнулись .... ))) 1

@Avazart 8488 / 6155 / 615 Регистрация: 10.12.2010 Сообщений: 28,683 Записей в блоге: 30
	07.07.2012, 23:31
	TNMHTTP старый компонент поэтому из-за этого может не получаться Юзать надо IdHTTP. Ну если там JS вполне возможно что не получится и тогда действительно стоит попробывать через CppWebBrowser. 0

@prosto_lynx 49 / 25 / 2 Регистрация: 09.06.2008 Сообщений: 227
	09.07.2012, 00:08
	Но как при использовании CppWebBrowser получить HTML-код?.. Возможно ли вообще это??? 0

@Avazart 8488 / 6155 / 615 Регистрация: 10.12.2010 Сообщений: 28,683 Записей в блоге: 30
	09.07.2012, 00:09
	Я в нем не особо, должно быть свойство... мой знакомый использовал его чтоб потом парсить страницу. Ищи... найдешь отпишись 0

Получение кода web страницы

Решение