Добрый день. В работе использую всякие разные парсеры, и часто получаю HTTP 403 —
SourceAccessDeniedError
, вероятнее всего WAF/антибот - может кто подскажет какие есть решения для обхода этих боокировок? Через диалог с моделью не получается, отказывается гаденыш)
любой хедлес браузер типа playwright или подобные. Если на винде то я использую ungoogled chromium портабельный с гитхаба. Добавить папку с прогой в агента и дать ему команду использовать новый вариант браузера во всем web . Поиск использовать web-search от ollama или подобных ресурсов своих моделей. Все это исключит прохождение проверок и блокировку и значительно сократит токены.