Тут ещё круто сразу освоить работу с заголовками запросов и куки, иначе сайты могут сразу отдавать пустой контент. И да, иногда полезно парсить не только html, но и json-ответы, если API под рукой — намного проще и надежнее.