Парсинг стены Vk без использования API

@Minato Udzumaki · Регистрация: 19.03.2016

Студворк — интернет-сервис помощи студентам

Добрый вечер.
Хочу написать парсер стены вк. И возник следующий вопрос.Можно ли это сделать не использую API?

@Welemir1 · 06.06.2018, 06:44

Minato Udzumaki, ну твой браузер парсит стену ВК не зная никакого АПИ, верно? иди его путем

@Minato Udzumaki · 06.06.2018, 10:48 **[ТС]**

Я пытался сделать через POST запрос все , но ничего не вышло , не возвращает результат

@Welemir1 · 06.06.2018, 10:54

Minato Udzumaki, а ты посмотри как именно шлет запрос браузер, там ведь авторизация нужна и прочее (заголовки и тело запроса)

@Minato Udzumaki · 06.06.2018, 11:02 **[ТС]**

я вот думаю дело в авторизации. запрос на поиск я смотрел , но перед этим не авторизовался вот он и возвращает мне стартовую страницу

Добавлено через 4 минуты
Не подскажешь , что бы авторизоваться мне надо просто послать запрос , а уже потом слать запрос на поиск,да ?

@Welemir1 · 06.06.2018, 11:04

Minato Udzumaki, надо разбираться, но скорее всего шлешь запрос авторизации, он тебе вернет куки сессии, и вот с этими куки уже шлешь запрос стены.

@ТабуретY · 06.06.2018, 11:16

Чтобы посмотреть страницу открытой группы достаточно

Python
1
2
3
4
5
6
7
8
import requests
url = ''
headers = {
        'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10.9; rv:45.0) Gecko/20100101 Firefox/45.0'
      }
r = requests.get(url, headers = headers)
 
print(r.text)

но получить удастся довольно мало, так как там динамически подгружается контент, нужно использовать headless браузеры и selenium

@Welemir1 · 06.06.2018, 11:29

ну если селениум, то там с авторизацией проблем нет, покликал пароль и вперед)

@Minato Udzumaki · 06.06.2018, 13:29 **[ТС]**

Пытаюсь использовать https://vk.com/al_wall.php , но возвращает страницу с ошибкой . В чем может быть дело ?

@flashcsgroup · 07.06.2018, 06:59

Сообщение от Minato Udzumaki

https://vk.com/al_wall.php

Boзможно это чтото приватное и скрыто настройками другого пользователя.

В этой теме уже готовый питоновский инструмент , который умеет парсить страницы - Locust код

Новые блоги и статьи Все статьи Все блоги /
Конвертировать закладки radiotray-ng в m3u-плейлист damix 19.02.2026 Это можно сделать скриптом для PowerShell. Использование . \СonvertRadiotrayToM3U. ps1 <path_to_bookmarks. json> Рядом с файлом bookmarks. json появится файл bookmarks. m3u с результатом. # Check if. . .	Семь CDC на одном интерфейсе: 5 U[S]ARTов, 1 CAN и 1 SSI Eddy_Em 18.02.2026 Постепенно допиливаю свою "многоинтерфейсную плату". Выглядит вот так: https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11617&stc=1&d=1771445347 Основана на STM32F303RBT6. На борту пять. . .	Камера Toupcam IUA500KMA Eddy_Em 12.02.2026 Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .	И ясному Солнцу zbw 12.02.2026 И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.
«Знание-Сила» zbw 12.02.2026 «Знание-Сила» «Время-Деньги» «Деньги -Пуля»	SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 12.02.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .	SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 11.02.2026 Содержание блога Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .	SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL3_image 8Observer8 10.02.2026 Содержание блога Библиотека SDL3_image содержит инструменты для расширенной работы с изображениями. Пошагово создадим проект для загрузки изображения формата PNG с альфа-каналом (с прозрачным. . .

@Minato Udzumaki 0 / 0 / 0 Регистрация: 19.03.2016 Сообщений: 23

	Парсинг стены Vk без использования API 06.06.2018, 01:15. Показов 11032. Ответов 9 Метки vk, парсинг (Все метки) Добрый вечер. Хочу написать парсер стены вк. И возник следующий вопрос.Можно ли это сделать не использую API? 0

@Welemir1 Автоматизируй это! 7391 / 4818 / 1246 Регистрация: 30.03.2015 Сообщений: 13,688 Записей в блоге: 29
	06.06.2018, 06:44
	Minato Udzumaki, ну твой браузер парсит стену ВК не зная никакого АПИ, верно? иди его путем 0

@Minato Udzumaki 0 / 0 / 0 Регистрация: 19.03.2016 Сообщений: 23
	06.06.2018, 10:48 [ТС]
	Я пытался сделать через POST запрос все , но ничего не вышло , не возвращает результат 0

@Welemir1 Автоматизируй это! 7391 / 4818 / 1246 Регистрация: 30.03.2015 Сообщений: 13,688 Записей в блоге: 29
	06.06.2018, 10:54
	Minato Udzumaki, а ты посмотри как именно шлет запрос браузер, там ведь авторизация нужна и прочее (заголовки и тело запроса) 0

@Minato Udzumaki 0 / 0 / 0 Регистрация: 19.03.2016 Сообщений: 23
	06.06.2018, 11:02 [ТС]
	я вот думаю дело в авторизации. запрос на поиск я смотрел , но перед этим не авторизовался вот он и возвращает мне стартовую страницу Добавлено через 4 минуты Не подскажешь , что бы авторизоваться мне надо просто послать запрос , а уже потом слать запрос на поиск,да ? 0

@Welemir1 Автоматизируй это! 7391 / 4818 / 1246 Регистрация: 30.03.2015 Сообщений: 13,688 Записей в блоге: 29
	06.06.2018, 11:04
	Minato Udzumaki, надо разбираться, но скорее всего шлешь запрос авторизации, он тебе вернет куки сессии, и вот с этими куки уже шлешь запрос стены. 0

@Welemir1 Автоматизируй это! 7391 / 4818 / 1246 Регистрация: 30.03.2015 Сообщений: 13,688 Записей в блоге: 29
	06.06.2018, 11:29
	ну если селениум, то там с авторизацией проблем нет, покликал пароль и вперед) 0

@Minato Udzumaki 0 / 0 / 0 Регистрация: 19.03.2016 Сообщений: 23
	06.06.2018, 13:29 [ТС]
	Пытаюсь использовать https://vk.com/al_wall.php , но возвращает страницу с ошибкой . В чем может быть дело ? 0