Парсинг номеров телефона олх

@igoorrr · Регистрация: 30.10.2016

Author24 — интернет-сервис помощи студентам

Написал скрипт который получает все объявления из категории.
Потом метод который парсит номера телефонов
Но в результатах получаю не 100% результат, и даже не 60))))

Сам метод получения номера телефона. На вход метод получает массив ссылок на объявления.

Python

def get_phone(total_ads):
    useragent = UserAgent()
    profile = webdriver.FirefoxProfile()
    profile.set_preference("general.useragent.override", useragent.random)
    driver = webdriver.Firefox(firefox_profile=profile, executable_path="B:\webdriver\geckodriver.exe")
    total_phone = []
    for ads in total_ads:
        time.sleep(1)
        try:
            driver.get(ads)
        except:
            print('Err')
        try:
            phone_btn = driver.find_element_by_xpath('//span[@class="spoiler"]')
        except:
            print("err")
        try:
            phone_btn.click()
        except:
            print("err")
        try:
            getphone = driver.find_element_by_xpath("//strong[@class='xx-large']").text
        except:
            print("err")
        print(getphone)
        time.sleep(2)
        total_phone.append(getphone)
    return total_phone

В результате получаю каждый 3-й результат err и частенько получаю результат "Показать телефон"
Или это олх как-то блокирует запросы или проблемы в коде.
Прошу помощи

@Garry Galler · 11.07.2020, 20:47

Сообщение от igoorrr

print("err")

Офигенный способ логирования ошибок.
А 'Err' это уже совсем другая ошибка?

Добавлено через 25 секунд

Сообщение от igoorrr

Прошу помощи

Попробуй логировать человеческими способами.

@igoorrr · 12.07.2020, 17:10 **[ТС]**

Да вы совершенно правы, на вопрос был не о этом.
Ошибка случается в разные промежутки времени разные ошибки.
Я думаю дело в том что олх блокирует запросы.
Но вот как решить не знаю.

@Garry Galler 5435 / 3858 / 1215 Регистрация: 28.10.2013 Сообщений: 9,553 Записей в блоге: 1
	11.07.2020, 20:47	2
	Сообщение от igoorrr print("err") Офигенный способ логирования ошибок. А 'Err' это уже совсем другая ошибка? Добавлено через 25 секунд Сообщение от igoorrr Прошу помощи Попробуй логировать человеческими способами. 0

@igoorrr 0 / 0 / 0 Регистрация: 30.10.2016 Сообщений: 53
	12.07.2020, 17:10 [ТС]	3
	Да вы совершенно правы, на вопрос был не о этом. Ошибка случается в разные промежутки времени разные ошибки. Я думаю дело в том что олх блокирует запросы. Но вот как решить не знаю. 0