Python Turbo. Уютное сообщество Python разработчиков.

Скачиваем web-сайт целиком



pywebcopy поможет вам клонировать отдельные веб-страницы или даже целые сайты.

Перед использованием установите пакет:

pip install pywebcopy

Функция save_webpage скачивает страницу по указанной ссылке, в аргументы также можно передать путь, куда сохранить результат.



А вот save_website дает возможность скачать целый вебсайт рекурсивно. Например, если сайт представляет из себя блог, то скрипт скачет все статьи, которые есть на сайте.



Но здесь надо быть аккуратнее, подобная рекурсивная загрузка отправит много запросов к серверу и может сильно нагрузить его, если на сайте много страниц.