Как вытащить информацию с сайта

@Castro · Регистрация: 11.05.2013

Студворк — интернет-сервис помощи студентам

Суть такова: по работе имею дело с сайтом (работа не связана с IT), доступ по логину и паролю, работаю с клиентами, заполняю информацию о них. Для последующей работы мне нужна эта информация, через сайт ее найти можно, но она отображается разрозненно (проблематично узнать всё и быстро), поэтому веду таблицу в экселе с информацией о каждом клиенте. Надоело заполнять все это вручную. Подскажите наилучший способ реализации.

Один из способов: получить исходный код страницы и вырезать (как получить код страницы?)

Можно ли как то вытаскивать прямо из текстовых полей?

cpp_developer · 21.05.2013, 23:09

Парсер HTML
IdHTTP и все, что только можно с ним сделать!
Веб-браузер, парсинг в общем работа с веб-страничками!
Получение кода web страницы
Данные с web-страницы
и т.д.

@Castro · 21.05.2013, 23:53 **[ТС]**

Спасибо, почитал немного. Решил для большего удобства авторизовываться через CppWebBrowser прямо из формы. Есть ли возможность отменить проверку сертификата безопасности в нем?

cpp_developer · 22.05.2013, 02:05

Сообщение от Castro

отменить проверку сертификата безопасности

зловред ваяяем?

@Castro · 22.05.2013, 03:01 **[ТС]**

Сообщение от LK

зловред ваяяем?

нет, просто на сайте идет проверка безопасности и постоянно вылазиет. приходится принимать. не удобно.

cpp_developer · 22.05.2013, 03:23

Сообщение от Castro

проверка безопасности

это вы о чем-нибудь тмпа капчи говорите?

@Avazart · 22.05.2013, 03:27

Сообщение от LK

это вы о чем-нибудь тмпа капчи говорите?

сертификат для httpS

@Castro · 22.05.2013, 16:23 **[ТС]**

Сообщение от Avazart

сертификат для httpS

ага

Добавлено через 3 часа 5 минут
а еще не могу получить код через IdHTTP->Get с HTTPS

@Avazart · 22.05.2013, 16:25

Сообщение от Castro

а еще не могу получить код через IdHTTP->Get с HTTPS

10. Передача с использованием HTTPS

@fatfast · 27.05.2014, 01:31

Здравствуйте, мне показалось что это наиболее подходящая тема. Так вот в чем вопрос. Подскажите как можно программно реализовать выделение страницы загруженной в CppWebBrowser, скопировать и вставить скажем в Memo. Вариант с получением кода страницы не подходит... очень уж долго приходится сортировать полученную инфу. Поэтому нужно банально выделить всё, скопировать и вставить. интересует только текстовая информация на странице. Заранее спасибо.

@Avazart · 27.05.2014, 01:44

Скачать с помощью IdHTTP весь html код и удалить "всё не текстовое", т.е теги.

@fatfast · 27.05.2014, 01:57

В том то и дело, ищу способ упростить пооцесс, чтоб не удалять все лишнее...

@Avazart · 27.05.2014, 03:43

Упросить ? Куда его упрощать ?

Да нафига мог потребоваться голый текст ? Это же по сути каша.

@fatfast · 27.05.2014, 06:07

Да, упростить...на случай если можно обойтись просто методом копирования голого текста. Так, как я очень сомневаюсь, что есть способ ювелирного удаления всех тегов, ссылок и скриптов одним махом.

@volvo · 27.05.2014, 10:04

fatfast, в чем проблема?

C++
1
2
3
4
5
6
7
8
#include <Shdocvw.hpp>
 
// ...
    CppWebBrowser1->ExecWB(Shdocvw_tlb::OLECMDID::OLECMDID_SELECTALL,
        Shdocvw_tlb::OLECMDEXECOPT::OLECMDEXECOPT_DONTPROMPTUSER);
 
    CppWebBrowser1->ExecWB(Shdocvw_tlb::OLECMDID::OLECMDID_COPY,
        Shdocvw_tlb::OLECMDEXECOPT::OLECMDEXECOPT_DONTPROMPTUSER);

, и искомый текст у тебя в буфере обмена. Вставляй его куда нужно, и работай с ним...

@fatfast · 27.05.2014, 19:29

Проверю как буду у компьютера, но судя по коду то что мне нужно) Большое СПАСИБО!

Добавлено через 8 часов 58 минут
UI, Что-то 26 ошибок в Shdocvw.hpp...не подскажите в чем может быть проблемка? Если что bcb 6 версии...старушка так сказать... Если нужно скопирую ошибочки...может какой-то стандартный подход есть к решению?Заранее спасибо

Добавлено через 5 минут
Лог ошибок:
Build
[C++ Error] Shdocvw.hpp(893): E2293 ) expected
[C++ Error] Shdocvw.hpp(896): E2040 Declaration terminated incorrectly
[C++ Error] Shdocvw.hpp(896): E2190 Unexpected }
[C++ Error] Shdocvw.hpp(905): E2139 Declaration missing ;
[C++ Error] Shdocvw.hpp(906): E2238 Multiple declaration for 'CoInternetExplorer::_di_IWebBrowser2'
[C++ Error] Shdocvw.hpp(905): E2344 Earlier declaration of 'CoInternetExplorer::_di_IWebBrowser2'
[C++ Error] Shdocvw.hpp(906): E2139 Declaration missing ;
[C++ Error] Shdocvw.hpp(972): E2303 Type name expected
[C++ Error] Shdocvw.hpp(972): E2139 Declaration missing ;
[C++ Error] Shdocvw.hpp(973): E2303 Type name expected
[C++ Error] Shdocvw.hpp(973): E2238 Multiple declaration for 'TInternetExplorer::_di_IWebBrowser2'
[C++ Error] Shdocvw.hpp(972): E2344 Earlier declaration of 'TInternetExplorer::_di_IWebBrowser2'
[C++ Error] Shdocvw.hpp(973): E2139 Declaration missing ;
[C++ Error] Shdocvw.hpp(1031): E2293 ) expected
[C++ Error] Shdocvw.hpp(1062): E2238 Multiple declaration for 'TInternetExplorer::_di_IWebBrowser2'
[C++ Error] Shdocvw.hpp(973): E2344 Earlier declaration of 'TInternetExplorer::_di_IWebBrowser2'
[C++ Error] Shdocvw.hpp(1062): E2303 Type name expected
[C++ Error] Shdocvw.hpp(1062): E2139 Declaration missing ;
[C++ Error] Shdocvw.hpp(1123): E2139 Declaration missing ;
[C++ Error] Shdocvw.hpp(1124): E2238 Multiple declaration for 'CoShellBrowserWindow::_di_IWebBrowser2'
[C++ Error] Shdocvw.hpp(1123): E2344 Earlier declaration of 'CoShellBrowserWindow::_di_IWebBrowser2'
[C++ Error] Shdocvw.hpp(1124): E2139 Declaration missing ;
[C++ Error] Shdocvw.hpp(1142): E2139 Declaration missing ;
[C++ Error] Shdocvw.hpp(1143): E2238 Multiple declaration for 'CoShellWindows::_di_IShellWindows'
[C++ Error] Shdocvw.hpp(1142): E2344 Earlier declaration of 'CoShellWindows::_di_IShellWindows'
[C++ Error] Shdocvw.hpp(1142): E2228 Too many error or warning messages

@volvo · 27.05.2014, 19:35

Сообщение от fatfast

Если что bcb 6 версии...

Дальше не читал... Это корень всех зол, у меня XE2, там приведенный код прекрасно компилируется... Ищи на форуме примеры использования ExecWB, наверняка кто-то с BCB6 вызывал этот метод, нужную последовательность вызовов я показал...

@fatfast · 27.05.2014, 20:38

ок спасибо будем копать)

Добавлено через 51 минуту
Еще раз огромное спасибо UI. Вопрос решен и снят. Если кому понадобиться данный код под bcb6:
в .h добавляем:

C++
1
2
3
4
5
#include <OleCtrls.hpp>
#include <ComCtrls.hpp>
#include "SHDocVw_OCX.h"
#include <StdCtrls.hpp>
#include <ToolWin.hpp>

// если что лишнее скопировал- звиняйте.

в .cpp пишем:

C++
1
2
3
4
5
6
7
#include <clipbrd.hpp>
 
CppWebBrowser1->ControlInterface->ExecWB(Shdocvw_tlb::OLECMDID_SELECTALL,
        Shdocvw_tlb::OLECMDEXECOPT_DONTPROMPTUSER);
 
    CppWebBrowser1->ControlInterface->ExecWB(Shdocvw_tlb::OLECMDID_COPY,
        Shdocvw_tlb::OLECMDEXECOPT_DONTPROMPTUSER);

Как видно с кодом под XE различий почти нет. наверное все дело в заголовочных файлах.
В общем еще раз благодарю.

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Реализация движения на Box2D v3 - трение и коллизии с повёрнутыми стенами 8Observer8 20.02.2026 Содержание блога Box2D позволяет легко создать главного героя, который не проходит сквозь стены и перемещается с заданным трением о препятствия, которые можно располагать под углом, как верхнее. . .	Конвертировать закладки radiotray-ng в m3u-плейлист damix 19.02.2026 Это можно сделать скриптом для PowerShell. Использование . \СonvertRadiotrayToM3U. ps1 <path_to_bookmarks. json> Рядом с файлом bookmarks. json появится файл bookmarks. m3u с результатом. # Check if. . .	Семь CDC на одном интерфейсе: 5 U[S]ARTов, 1 CAN и 1 SSI Eddy_Em 18.02.2026 Постепенно допиливаю свою "многоинтерфейсную плату". Выглядит вот так: https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11617&stc=1&d=1771445347 Основана на STM32F303RBT6. На борту пять. . .	Камера Toupcam IUA500KMA Eddy_Em 12.02.2026 Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
И ясному Солнцу zbw 12.02.2026 И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.	«Знание-Сила» zbw 12.02.2026 «Знание-Сила» «Время-Деньги» «Деньги -Пуля»	SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 12.02.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .	SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 11.02.2026 Содержание блога Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .

@Castro 0 / 0 / 0 Регистрация: 11.05.2013 Сообщений: 5

	Как вытащить информацию с сайта 21.05.2013, 22:51. Показов 7645. Ответов 17 Метки нет (Все метки) Суть такова: по работе имею дело с сайтом (работа не связана с IT), доступ по логину и паролю, работаю с клиентами, заполняю информацию о них. Для последующей работы мне нужна эта информация, через сайт ее найти можно, но она отображается разрозненно (проблематично узнать всё и быстро), поэтому веду таблицу в экселе с информацией о каждом клиенте. Надоело заполнять все это вручную. Подскажите наилучший способ реализации. Один из способов: получить исходный код страницы и вырезать (как получить код страницы?) Можно ли как то вытаскивать прямо из текстовых полей? 0

cpp_developer 20124 / 5691 / 417 Регистрация: 09.04.2010 Сообщений: 22,546 Записей в блоге: 1
	21.05.2013, 23:09
	Парсер HTML IdHTTP и все, что только можно с ним сделать! Веб-браузер, парсинг в общем работа с веб-страничками! Получение кода web страницы Данные с web-страницы и т.д. 2

@Castro 0 / 0 / 0 Регистрация: 11.05.2013 Сообщений: 5
	21.05.2013, 23:53 [ТС]
	Спасибо, почитал немного. Решил для большего удобства авторизовываться через CppWebBrowser прямо из формы. Есть ли возможность отменить проверку сертификата безопасности в нем? 0

@fatfast 0 / 0 / 0 Регистрация: 27.05.2014 Сообщений: 5
	27.05.2014, 01:31
	Здравствуйте, мне показалось что это наиболее подходящая тема. Так вот в чем вопрос. Подскажите как можно программно реализовать выделение страницы загруженной в CppWebBrowser, скопировать и вставить скажем в Memo. Вариант с получением кода страницы не подходит... очень уж долго приходится сортировать полученную инфу. Поэтому нужно банально выделить всё, скопировать и вставить. интересует только текстовая информация на странице. Заранее спасибо. 0

@Avazart 8488 / 6155 / 615 Регистрация: 10.12.2010 Сообщений: 28,683 Записей в блоге: 30
	27.05.2014, 01:44
	Скачать с помощью IdHTTP весь html код и удалить "всё не текстовое", т.е теги. 0

@fatfast 0 / 0 / 0 Регистрация: 27.05.2014 Сообщений: 5
	27.05.2014, 01:57
	В том то и дело, ищу способ упростить пооцесс, чтоб не удалять все лишнее... 0

@Avazart 8488 / 6155 / 615 Регистрация: 10.12.2010 Сообщений: 28,683 Записей в блоге: 30
	27.05.2014, 03:43
	Упросить ? Куда его упрощать ? Да нафига мог потребоваться голый текст ? Это же по сути каша. 0

@fatfast 0 / 0 / 0 Регистрация: 27.05.2014 Сообщений: 5
	27.05.2014, 06:07
	Да, упростить...на случай если можно обойтись просто методом копирования голого текста. Так, как я очень сомневаюсь, что есть способ ювелирного удаления всех тегов, ссылок и скриптов одним махом. 0

@fatfast 0 / 0 / 0 Регистрация: 27.05.2014 Сообщений: 5
	27.05.2014, 19:29
	Проверю как буду у компьютера, но судя по коду то что мне нужно) Большое СПАСИБО! Добавлено через 8 часов 58 минут UI, Что-то 26 ошибок в Shdocvw.hpp...не подскажите в чем может быть проблемка? Если что bcb 6 версии...старушка так сказать... Если нужно скопирую ошибочки...может какой-то стандартный подход есть к решению?Заранее спасибо Добавлено через 5 минут Лог ошибок: Build [C++ Error] Shdocvw.hpp(893): E2293 ) expected [C++ Error] Shdocvw.hpp(896): E2040 Declaration terminated incorrectly [C++ Error] Shdocvw.hpp(896): E2190 Unexpected } [C++ Error] Shdocvw.hpp(905): E2139 Declaration missing ; [C++ Error] Shdocvw.hpp(906): E2238 Multiple declaration for 'CoInternetExplorer::_di_IWebBrowser2' [C++ Error] Shdocvw.hpp(905): E2344 Earlier declaration of 'CoInternetExplorer::_di_IWebBrowser2' [C++ Error] Shdocvw.hpp(906): E2139 Declaration missing ; [C++ Error] Shdocvw.hpp(972): E2303 Type name expected [C++ Error] Shdocvw.hpp(972): E2139 Declaration missing ; [C++ Error] Shdocvw.hpp(973): E2303 Type name expected [C++ Error] Shdocvw.hpp(973): E2238 Multiple declaration for 'TInternetExplorer::_di_IWebBrowser2' [C++ Error] Shdocvw.hpp(972): E2344 Earlier declaration of 'TInternetExplorer::_di_IWebBrowser2' [C++ Error] Shdocvw.hpp(973): E2139 Declaration missing ; [C++ Error] Shdocvw.hpp(1031): E2293 ) expected [C++ Error] Shdocvw.hpp(1062): E2238 Multiple declaration for 'TInternetExplorer::_di_IWebBrowser2' [C++ Error] Shdocvw.hpp(973): E2344 Earlier declaration of 'TInternetExplorer::_di_IWebBrowser2' [C++ Error] Shdocvw.hpp(1062): E2303 Type name expected [C++ Error] Shdocvw.hpp(1062): E2139 Declaration missing ; [C++ Error] Shdocvw.hpp(1123): E2139 Declaration missing ; [C++ Error] Shdocvw.hpp(1124): E2238 Multiple declaration for 'CoShellBrowserWindow::_di_IWebBrowser2' [C++ Error] Shdocvw.hpp(1123): E2344 Earlier declaration of 'CoShellBrowserWindow::_di_IWebBrowser2' [C++ Error] Shdocvw.hpp(1124): E2139 Declaration missing ; [C++ Error] Shdocvw.hpp(1142): E2139 Declaration missing ; [C++ Error] Shdocvw.hpp(1143): E2238 Multiple declaration for 'CoShellWindows::_di_IShellWindows' [C++ Error] Shdocvw.hpp(1142): E2344 Earlier declaration of 'CoShellWindows::_di_IShellWindows' [C++ Error] Shdocvw.hpp(1142): E2228 Too many error or warning messages 0