Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 5.00/5: Рейтинг темы: голосов - 5, средняя оценка - 5.00
2 / 2 / 0
Регистрация: 27.10.2020
Сообщений: 73

Парсинг сайта с bs4

03.05.2022, 15:37. Показов 1145. Ответов 2
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Доброго времени суток!
Помогите разобраться, пожалуйста, если не трудно)
Я хочу отправить запрос гуглу с навзанием города и узнать его площадь. Что-то типо этого:
https://www.google.com/search?... ода+Москва.
Гугол обычно выводит результат на поисковой странице, и именно его я и хочу забрать.
Вот код:
Python
1
2
3
4
5
6
7
for i in ['Москва', 'Нальчик']:
    url = f"https://google.com/search?q=площадь+города+{i}"
    print(url)
    response = requests.get(url)
    soup = BeautifulSoup(response.text, "html.parser")
    y = soup.find_all('div', {'class': 'GyAeWb', 'id': "main"})
    print(y)
Но он почему-то всегда возращает пустой запрос []
Я только начал изучать эту тему, поэтому без понятия, где может быть ошибка
Помогите, пожалуйста
0
Лучшие ответы (1)
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
03.05.2022, 15:37
Ответы с готовыми решениями:

Парсинг сайта с bs4
Добрый день! Хочу распарсить и пройтись по всем названиям товаров на странице, однако, метод find_all() стабильно находит лишь 4 товара на...

Парсинг сайта с bs4
Здравствуйте! Пытаюсь спарсить один сайт, но выводит постоянно это: (Скриншот) В чем может быть проблема?

Парсинг на bs4
есть вот такой код import requests from bs4 import BeautifulSoup as bs url = 'https://1xstavka.ru/live/' page = requests.get(url) ...

2
Эксперт по компьютерным сетям
 Аватар для Jabbson
5906 / 3358 / 1036
Регистрация: 03.11.2009
Сообщений: 10,008
03.05.2022, 20:45
Лучший ответ Сообщение было отмечено dela45 как решение

Решение

Python
1
2
3
4
5
6
7
8
9
10
11
In [1]: city = 'Москва'
In [2]: url = f"https://google.com/search?q=площадь+города+{city}"
In [3]: print(url)
https://google.com/search?q=площадь+города+Москва
 
In [4]: import requests
In [5]: response = requests.get(url)
In [6]: soup = BeautifulSoup(response.text, "html.parser")
 
In [7]: print(soup.select_one('.BNeawe.iBp4i.AP7Wnd').text)
2,511 km²
Добавлено через 1 минуту
Я не уверен, что этот способ будет всегда работать, не думаю, что у нас есть какой-то стабильный API для городов.
1
2 / 2 / 0
Регистрация: 27.10.2020
Сообщений: 73
03.05.2022, 21:42  [ТС]
Jabbson, спасибо, мою проблему это решило)
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
03.05.2022, 21:42
Помогаю со студенческими работами здесь

Парсинг ::before with BS4 (псевдо-класс)
Я пытался запарсить данные таблицы на это сайте. Но у меня не вышло запарсить псевдо класс ::before url =...

Парсинг olx.ua Python+requests+bs4
Пытаясь сделать парсер мобильных телефонов на сайте olx.ua столкнулся с проблемой:при отправке ajax запроса мне выдает вместо корректного...

Как достать ссылку из поисковой системы Яндекс? (Парсинг, python, bs4)
Возникла проблема при парсинге поисковой системы Яндекса. Необходимо сравнить ссылку, которую вводит пользователь и который есть на...

Bs4 - не получается извлечь данные с сайта
Пытался извлечь с сайта gumtree.com инфу с объявлений, название, цену Ошибок в коде нет Мне выдает пустой ответ : ...

Парсинг на Python. BeautifulSoup, bs4, requests
Добрый день. Нужна помощь от людей, кто работал с BeautifulSoup на Python. Пытаюсь получить со страницы проверки QR кода на ГосУслугах дату...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
3
Ответ Создать тему
Новые блоги и статьи
PhpStorm 2025.3: WSL Terminal всегда стартует в ~
and_y87 14.12.2025
PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .
Access
VikBal 11.12.2025
Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
Новый ноутбук
volvo 07.12.2025
Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .
Ломающие изменения в C#.NStar Alpha
Etyuhibosecyu 20.11.2025
Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .
Мысли в слух
kumehtar 18.11.2025
Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .
Создание Single Page Application на фреймах
krapotkin 16.11.2025
Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2025, CyberForum.ru