@ArtemVortax, да, конечно. Я просто давным-давно не видел сервера с одним ядром))
Тогда просто парси больше страниц.
Запускать несколько процессов на одном ядре смысла не имеет. И не важно как ты это будешь делать - руками, supervisord, cluster и т.п. Общий рантайм процесса прожорливый, а ты его множишь (и пофиг что в основе - loop, multithread и т.п.). Можешь запустить один процесс с 100 страниц в единицу времени и запустить 10 процессов по 10 страниц и посмотреть загрузку.
@mathete, сервачок тестовый за 4 бакса ))
В том то и проблема, что я не могу одним процессам парсить по-максимуму, поэтому я и размножил его. Не понимаю, что именно ограничивает приложение.