У curl-а есть настройки прокси и многопоточность (линейно загружаешь несколько страниц и ленейно получаешь ответы, но выполнятся они будут одновременно)