Распределение нагрузки при парсинге сайтов и подключение дополнительных облачных ресурсов
В этом посте пойдет речь о библиотеке, которая регистрирует в себе узлы и перенаправляет запросы из вне на конкретный узел. Как появилась идея написать этот проект? После того, как появилась необходимость в парсинге сайтов в больших количествах я попытался реализовать такую штуку с помощью selenium grid, потом взял selenoid. selenoid подошел, но там было много […]