API, использующий selenium для веб-скраппинга

Я создаю API (Django/DRF с daphne), который принимает запросы, ищет данные на сайте и возвращает их в ответ пользователю.

Будет ли это правильно работать для нескольких пользователей в одно и то же время (параллельно)? Или невозможно одновременно скрести сайт для каждого запроса?

это зависит

Если несколько пользователей одновременно скребут один и тот же сайт, и ваши скрипты скрепа без прокси, некоторые пользователи могут получать ошибки в ответ, когда целевой сайт отказывается отвечать на ваш процесс.

В противном случае, он может работать нормально

Вернуться на верх