Агентская полка

Website-downloader

Утилита для скачивания сайта целиком: сохраняет страницы и ресурсы для локального изучения или архива.

Скрапинг
Открыть оригинал ↗

Веб-обёртка над wget: скачивает сайт целиком — страницы, стили, картинки — и складывает в архив для офлайн-просмотра.

Работает локально: Node.js-сервер на 3000-м порту, в браузере вводишь адрес и получаешь ссылку на готовый архив. Сам wget должен быть установлен в системе и доступен в PATH — без него ничего не скачается.

Есть потолок размера (по умолчанию 100 МБ) и таймаут на одну загрузку (5 минут), чтобы один запрос не забил диск. Флаги wget стандартные: зеркало, преобразование ссылок в относительные, докачка ресурсов и запрет выхода в родительскую папку.

Подходит для архива документации и своего сайта, а не для копирования чужих сервисов.