Согласен, requests с BeautifulSoup — норм старт для парсинга. Ещё важно учитывать, что некоторые сайты могут крутить JavaScript динамически, и тут уже requests не помогут, тогда Selenium выручает. Паузы между запросами реально спасают от бана, а логировать ответы — это кайф, чтобы быстро понять, где затык. Ну и да, структура страниц часто ломается, так что код лучше делать модульным, чтобы не переписывать всё заново.