[BUG]: Ошибки 403 и 400

[user1324812841]

ОС

Windows 10 / Ubuntu 24.04.4

Версия парсера

3.2.16

Способ запуска

Docker

Текст ошибки

parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
parser.http.client:request:82 - Запрос заблокирован (403), попытка 1



integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes

Логи

2026-07-10 19:44:46.216 | INFO     | __main__:parse:118 - page=1
2026-07-10 19:44:46.304 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:44:46.305 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 1
2026-07-10 19:44:56.394 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:44:56.395 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 2
2026-07-10 19:45:06.484 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:45:06.484 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 3
2026-07-10 19:45:16.570 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:45:16.571 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 4
2026-07-10 19:45:26.683 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:45:26.683 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 5
2026-07-10 19:45:37.688 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:45:37.877 | INFO     | __main__:parse:160 - Объявлений перед чисткой 40
2026-07-10 19:45:37.902 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_viewed осталось 14
2026-07-10 19:45:37.903 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_price_range осталось 14
2026-07-10 19:45:37.903 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_black_keywords осталось 7
2026-07-10 19:45:37.904 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_white_keyword осталось 7
2026-07-10 19:45:37.904 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_address осталось 7
2026-07-10 19:45:37.904 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_seller осталось 7
2026-07-10 19:45:37.905 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_recent_time осталось 3
2026-07-10 19:45:37.905 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_reserve осталось 3
2026-07-10 19:45:37.906 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_promotion осталось 3
2026-07-10 19:45:38.342 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:38.342 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:40.520 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:40.520 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:41.072 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:41.073 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:41.787 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:41.788 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:42.453 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:42.454 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:43.022 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:43.023 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:43.542 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:43.543 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:44.345 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:44.345 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:45.026 | ERROR    | integrations.notifications.transport:send_with_retries:41 - [notify] non-retryable client error 400, aborting
2026-07-10 19:45:45.027 | INFO     | integrations.notifications.telegram:notify_ad:123 - [notify] sendPhoto URL rejected (400), retrying with image bytes
2026-07-10 19:45:45.562 | INFO     | __main__:parse:184 - Пауза 5 сек.
2026-07-10 19:45:50.563 | INFO     | __main__:parse:188 - Сохраняю 3 объявлений
2026-07-10 19:45:50.563 | INFO     | __main__:parse:118 - page=1
2026-07-10 19:45:50.659 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:45:50.660 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 1
2026-07-10 19:46:01.935 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:46:02.211 | INFO     | __main__:parse:160 - Объявлений перед чисткой 40
2026-07-10 19:46:02.236 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_viewed осталось 9
2026-07-10 19:46:02.237 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_price_range осталось 9
2026-07-10 19:46:02.237 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_black_keywords осталось 7
2026-07-10 19:46:02.237 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_white_keyword осталось 7
2026-07-10 19:46:02.238 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_address осталось 7
2026-07-10 19:46:02.238 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_seller осталось 7
2026-07-10 19:46:02.238 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_recent_time осталось 0
2026-07-10 19:46:02.239 | INFO     | __main__:parse:184 - Пауза 5 сек.
2026-07-10 19:46:07.240 | INFO     | __main__:parse:191 - Сохранять нечего
2026-07-10 19:46:07.240 | INFO     | __main__:parse:118 - page=1
2026-07-10 19:46:07.330 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:46:07.330 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 1
2026-07-10 19:46:17.416 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:46:17.417 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 2
2026-07-10 19:46:27.520 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:46:27.521 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 3
2026-07-10 19:46:37.632 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:46:37.632 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 4
2026-07-10 19:46:47.716 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:46:47.716 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 5
2026-07-10 19:46:57.805 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:46:57.805 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 6
2026-07-10 19:47:07.950 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:47:07.950 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 7
2026-07-10 19:47:18.031 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:47:18.031 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 8
2026-07-10 19:47:28.948 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:47:29.199 | INFO     | __main__:parse:160 - Объявлений перед чисткой 40
2026-07-10 19:47:29.220 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_viewed осталось 5
2026-07-10 19:47:29.221 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_price_range осталось 5
2026-07-10 19:47:29.222 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_black_keywords осталось 1
2026-07-10 19:47:29.222 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_white_keyword осталось 1
2026-07-10 19:47:29.222 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_address осталось 1
2026-07-10 19:47:29.223 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_seller осталось 1
2026-07-10 19:47:29.223 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_recent_time осталось 0
2026-07-10 19:47:29.224 | INFO     | __main__:parse:184 - Пауза 5 сек.
2026-07-10 19:47:34.224 | INFO     | __main__:parse:191 - Сохранять нечего
2026-07-10 19:47:34.225 | INFO     | __main__:parse:118 - page=1
2026-07-10 19:47:34.335 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:47:34.335 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 1
2026-07-10 19:47:45.406 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:47:45.589 | INFO     | __main__:parse:160 - Объявлений перед чисткой 40
2026-07-10 19:47:45.610 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_viewed осталось 5
2026-07-10 19:47:45.611 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_price_range осталось 5
2026-07-10 19:47:45.612 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_black_keywords осталось 1
2026-07-10 19:47:45.612 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_white_keyword осталось 1
2026-07-10 19:47:45.612 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_address осталось 1
2026-07-10 19:47:45.613 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_seller осталось 1
2026-07-10 19:47:45.613 | INFO     | filters.ads_filter:apply:30 - После фильтрации _filter_by_recent_time осталось 0
2026-07-10 19:47:45.614 | INFO     | __main__:parse:184 - Пауза 5 сек.
2026-07-10 19:47:50.614 | INFO     | __main__:parse:191 - Сохранять нечего
2026-07-10 19:47:50.614 | INFO     | __main__:parse:118 - page=1
2026-07-10 19:47:50.699 | DEBUG    | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 19:47:50.699 | WARNING  | parser.http.client:request:82 - Запрос заблокирован (403), попытка 1

Конфиг

max_price = 99999999
min_price = 0
geo = ""
proxy_string = "*******:*****@mproxy.site:******"
proxy_change_url = ""
pause_general = 30
pause_between_links = 5
max_age = 1800
max_count_of_retry = 20
ignore_reserv = false
ignore_promotion = false
one_time_start = false
one_file_for_link = false
parse_views = false
save_xlsx = false
use_webdriver = false
use_bypass_api = true
cookies_api_key = "***************"
use_own_cookies = false
parse_phone = false
proxy_notifier = "**********"
tg_only_text = false
retry_delay = 10
timeout = 30
block_threshold = 20

[user1324812841]

Начал спамить 403 и 400, чего раньше не наблюдалось.
403 проскакивала естественным образом, но сейчас выдает сразу же в любом виде при любом запросе
Менял сервера, не работает,
Увеличение дилея тоже не помогло, хоть час ставь, всё равно 403 сразу же вылетает, пользуюсь уже достаточно давно и такой спам наблюдаю впервые,
уведомления в тг приходят, с картинкой, но ошибки такой раньше даже и не было.

Из того что я понимаю, куки сразу же блокируются и вызывают эту длительную разблокировку, перевыпуск помогает как я вижу только на 1-2 запроса, почему они блокируются моментально, не понимаю..

*Мобайл прокси серверный + спфа

Что думаете?

[user1324812841]

Иногда даже на 1-2 не хватает, как видно здесь сразу же блокировка, выручайте коллеги!! Буду благодарен любым советам, типсам
При меньшем количестве разблокировки, баланс просто неумолимо сгорает, бывает разблокировка после 3 запросов, или как тут 20 не хватает

2026-07-10 20:17:13.488 | INFO | main:parse:118 - page=1
2026-07-10 20:17:13.573 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:17:13.574 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 1
2026-07-10 20:17:23.718 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:17:23.718 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 2
2026-07-10 20:17:33.867 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:17:33.868 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 3
2026-07-10 20:17:43.958 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:17:43.958 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 4
2026-07-10 20:17:54.040 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:17:54.041 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 5
2026-07-10 20:18:04.128 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:18:04.129 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 6
2026-07-10 20:18:14.212 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:18:14.212 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 7
2026-07-10 20:18:24.319 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:18:24.320 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 8
2026-07-10 20:18:34.421 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:18:34.422 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 9
2026-07-10 20:18:44.523 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:18:44.523 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 10
2026-07-10 20:18:54.605 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:18:54.606 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 11
2026-07-10 20:19:04.700 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:19:04.700 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 12
2026-07-10 20:19:14.782 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:19:14.783 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 13
2026-07-10 20:19:24.873 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:19:24.874 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 14
2026-07-10 20:19:35.001 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:19:35.001 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 15
2026-07-10 20:19:45.106 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:19:45.106 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 16
2026-07-10 20:19:55.193 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:19:55.193 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 17
2026-07-10 20:20:05.279 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:20:05.280 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 18
2026-07-10 20:20:15.362 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:20:15.363 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 19
2026-07-10 20:20:25.448 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:20:25.449 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 20
2026-07-10 20:20:25.450 | WARNING | parser.http.client:request:88 - Достигнут лимит блокировок, запускается обработка
2026-07-10 20:20:25.450 | WARNING | parser.cookies.external_api:handle_block:101 - ⚠️ Все последние 20 кодов плохие (403/429) — покупаем новые cookies
2026-07-10 20:20:25.450 | INFO | parser.cookies.external_api:_get_new_cookies:184 - 🛒 Запрашиваем покупку новых cookies у сервиса
2026-07-10 20:20:25.755 | INFO | parser.cookies.external_api:_get_new_cookies:237 - ✅ Cookies успешно получены | id=*******
2026-07-10 20:20:25.756 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:20:25.756 | DEBUG | parser.cookies.external_api:_get_new_cookies:240 - 💾 Cookies сохранены на диск
2026-07-10 20:20:38.758 | WARNING | main:fetch_data:80 - Ошибка при запросе https://www.avito.ru/all/**********************************************************************************************=104: HTTP запросы были неуспешными
2026-07-10 20:20:38.764 | WARNING | main:parse:134 - Не удалось получить HTML для https://www.avito.ru/all/***********************************************=104, пробую заново через 5 сек.
2026-07-10 20:20:43.765 | INFO | main:parse:191 - Сохранять нечего
2026-07-10 20:20:43.765 | INFO | main:parse:118 - page=1
2026-07-10 20:20:44.091 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:20:44.092 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 1
2026-07-10 20:20:54.182 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:20:54.183 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 2
2026-07-10 20:21:04.303 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:21:04.303 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 3
2026-07-10 20:21:14.392 | DEBUG | parser.cookies.external_api:_save_to_disk:258 - 💾 Cookies сохранены на диск
2026-07-10 20:21:14.393 | WARNING | parser.http.client:request:82 - Запрос заблокирован (403), попытка 4

[Duff89]

@user1324812841 Да, Авито обновился и начались проблемы. Знаю об этом и пытаюсь найти рабочее решение.
Авито касается только 403\429 ошибок, ошибка 400 - это ошибка отправки в ТГ (привет ркн), для исправления можно указать иностранный прокси и\или отправлять только текст в тг tg_only_text, ну или использовать иностранный сервер

[user1324812841]

Благодарю за ответ!!!
Spfa так же говорят о проблеме..