Как сделать такой парсер на python?

@ctepler · Регистрация: 28.08.2022

Студворк — интернет-сервис помощи студентам

Я смотрел видосы по python requests, но не могу понять, как мне взять заголовок первого сайта из поисковой выдачи?

То есть пользователь вводит например "Бойцовский клуб", к нему в конец добавляется "Кинопоиск" и логично, что если такое загуглить, то первой будет ссылка на кинопоиск. Так вот как мне взять заголовок этой первой ссылки и саму ссылку? Чтобы отправить это пользователю? Я уже как не пытался, никак у меня не получается... Буду очень признателен

Навоял такой код (мало понимаю в чем его смысл если честно):

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
import urllib
import requests
from bs4 import BeautifulSoup
 
 
 
query = "Бойцовский Клуб"
query = query.replace(' ', '+')
URL = f"https://google.com/search?q={query}"
 
# desktop user-agent
USER_AGENT = "Mozilla/5.0 (Macintosh; Intel Mac OS X 10.14; rv:65.0) Gecko/20100101 Firefox/65.0"
# mobile user-agent
MOBILE_USER_AGENT = "Mozilla/5.0 (Linux; Android 7.0; SM-G930V Build/NRD90M) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.125 Mobile Safari/537.36"
 
headers = {"user-agent" : MOBILE_USER_AGENT}
resp = requests.get(URL, headers=headers)
 
if resp.status_code == 200:
    soup = BeautifulSoup(resp.content, "html.parser")
 
results = []
for g in soup.find_all('div', class_='r'):
    anchors = g.find_all('a')
    if anchors:
        link = anchors[0]['href']
        title = g.find('h3').text
        item = {
            "title": title,
            "link": link
        }
        results.append(item)
print(results)

Как мне это сделать ?

@CBR · 08.02.2023, 13:37

Сообщение от ctepler

Навоял такой код (мало понимаю в чем его смысл если честно)

этот как вообще возможно такое?)

@ctepler · 08.02.2023, 14:28 **[ТС]**

спрашивал на форуме, мне кинули линк на статью, в заголовке написано именно то, что мне нужно, я скопипастил и оно не делало то, что мне нужно....

@Ципихович Эндрю · 08.02.2023, 15:27

Сообщение от ctepler

в заголовке написано именно то, что мне нужно, я скопипастил и оно не делало то, что мне нужно....

значит нужно наказать того, кто дал такой линк, что он не проверил прежде чем дать сие, не?

@piton21 · 08.02.2023, 16:01

Код максимально странный, как и поставленная задача. Либо всё переделывать, либо, если надо именно поиск на кинопоиске, сделать поиск на кинопоиске, а гугл здесь не при чём.

@brian778 · 08.02.2023, 16:01

Не советовал бы я вам связываться с google, тем более через requests
Они очень не любят когда их хотят "обмануть"

Новые блоги и статьи Все статьи Все блоги /
Thinkpad X220 Tablet — это лучший бюджетный ноутбук для учёбы, точка. Programma_Boinc 23.12.2025 Thinkpad X220 Tablet — это лучший бюджетный ноутбук для учёбы, точка. Рецензия / Мнение/ Перевод Сайт называется reddit: The Thinkpad X220 Tablet is the best budget school laptop period. Это. . .	PhpStorm 2025.3: WSL Terminal всегда стартует в ~ and_y87 14.12.2025 PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .	Как объединить две одинаковые БД Access с разными данными VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.	Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .	Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .	Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .

@ctepler -18 / 1 / 0 Регистрация: 28.08.2022 Сообщений: 138
	08.02.2023, 14:28 [ТС]
	спрашивал на форуме, мне кинули линк на статью, в заголовке написано именно то, что мне нужно, я скопипастил и оно не делало то, что мне нужно.... 0

@piton21 132 / 96 / 40 Регистрация: 24.03.2022 Сообщений: 357
	08.02.2023, 16:01
	Код максимально странный, как и поставленная задача. Либо всё переделывать, либо, если надо именно поиск на кинопоиске, сделать поиск на кинопоиске, а гугл здесь не при чём. 0

@brian778 419 / 311 / 107 Регистрация: 30.08.2022 Сообщений: 1,195
	08.02.2023, 16:01
	Не советовал бы я вам связываться с google, тем более через requests Они очень не любят когда их хотят "обмануть" 0