9

Вопрос к парсерам сайтов

Товарищи, подскажи новичку, плиз.

Много материалов, где можно посмотреть, как брать данные с сайтов. Но вот у меня возник такой вопрос... Допустим, что тебе нужно много страниц, но ты не знаешь их количество, т.е. тебе не известна "глубина и широта" ресурса. А тебе надо спарсить весь. Вот как это сделать?

Программирование на python

913 постов11.9K подписчиков

Правила сообщества

Публиковать могут пользователи с любым рейтингом. Однако!


Приветствуется:

• уважение к читателям и авторам

• конструктивность комментариев

• простота и информативность повествования

• тег python2 или python3, если актуально

• код публиковать в виде цитаты, либо ссылкой на специализированный сайт


Не рекомендуется:

• допускать оскорбления и провокации

• распространять вредоносное ПО

• просить решить вашу полноценную задачу за вас

• нарушать правила Пикабу