Скачать сайт целиком онлайн и пробить клоаку: сервис для арбитражника

У арбитражника постоянно возникает одна и та же задача: забрать чужой сайт. Понравился лендинг конкурента, нужен прелендинг под свою связку, хочется разобрать удачный оффер по кусочкам или просто сохранить страницу, пока её не открутили. Способ по умолчанию, «Сохранить как» в браузере, ломается на первом же нормальном сайте: часть картинок не тянется, стили едут, видео пропадает, а половина путей ведёт в никуда. С офферами всё ещё хуже, потому что они спрятаны за клоакой и по прямой ссылке отдают белую страницу.

Сервис down-web.ru закрывает обе задачи. Он сохраняет доступные браузеру страницы с картинками, стилями, шрифтами и видео. Отдельный режим пробует открыть версию страницы для выбранного ГЕО и источника, но не гарантирует выдачу оффера или полноту копии. Дальше по порядку разберём, что он умеет и как этим пользоваться.

Зачем арбитражнику скачивать чужие сайты и офферы

Чужой лендинг, который уже крутится в открутке, это готовая гипотеза. Наличие активного объявления не доказывает прибыльность связки. Сохранённая страница полезна как материал для анализа, а не как подтверждённый кейс окупаемости. Забрать её к себе, изучить, переупаковать под свой оффер и ГЕО быстрее, чем придумывать с нуля. То же с офферами: увидеть, что именно рекламодатель показывает покупателю после клика, полезно и для выбора вертикали, и для понимания, почему связка конвертит. Проблема одна: и лендинги, и офферы не отдаются в руки просто так. Их нужно уметь корректно снять.

Что умеет сервис в двух словах

Внутри две большие функции. Первая скачивает сайт по ссылке и складывает его в аккуратный архив, готовый открыть локально двойным кликом. Вторая, «Пробить клоаку», имитирует настоящий рекламный клик из выбранного ГЕО, чтобы клоака отдала оффер, и скачивает уже его. Обе работают онлайн, без установки программ, регистрации и танцев с бубном: вставили ссылку, нажали кнопку, забрали ZIP.

Как скачать сайт целиком онлайн

Базовый режим выглядит просто: вставляете URL, жмёте скачать, через несколько секунд получаете архив. Но под капотом происходит больше, чем у обычного качалок-скриптов, и именно это отличает результат.

Рендер в настоящем браузере, а не сохранение исходника

Сервис открывает страницу в реальном Chrome, а не тянет голый HTML. Это важно, потому что современные сайты дорисовывают половину контента скриптами уже после загрузки. Обычная качалка видит пустой каркас, а браузерный рендер видит страницу такой, какой её видит человек, и перехватывает все ресурсы, которые она реально запросила: стили, шрифты, картинки, скрипты, медиа.

Чистая раскладка по папкам

Скачанные файлы не сваливаются в кучу. Они раскладываются по понятным папкам: стили в css, скрипты в js, изображения в img, шрифты в fonts, видео и аудио отдельно. Пути скачанных ресурсов переписываются на локальные. Но библиотеки на CDN, API-запросы и серверная обработка формы могут требовать интернет или отдельный бэкенд. После распаковки откройте index.html и проверьте вкладку Network: какие ресурсы ещё загружаются извне.

Библиотеки на CDN и удаление счётчиков

Популярные библиотеки вроде Bootstrap или jQuery сервис не тащит локальными копиями, а подменяет ссылками на cdnjs. Архив становится легче, а дубли пропадают. Параллельно вычищается вся аналитика и трекинг: Google Analytics, GTM, Яндекс Метрика, пиксель Facebook, Hotjar, Clarity и прочие счётчики. На выходе чистая страница без чужих глаз, которые следили бы за тем, как вы её открываете.

Все страницы сайта разом

Если нужен не один лендинг, а целый сайт, включается галочка «Скачать все страницы сайта». Краулер проходит по внутренним ссылкам вглубь, до сотни с лишним страниц и до десятка уровней вложенности, и собирает всё в один архив с сохранённой структурой. Удобно, когда у оффера многошаговая воронка или когда нужно забрать блог с кейсами целиком.

Форматирование кода

HTML, CSS и JS в архиве не в один сжатый ряд, а отформатированы по-человечески. Лишние комментарии вырезаны, отступы расставлены. Разбирать чужую верстку и вытаскивать нужные блоки становится заметно проще, чем ковыряться в минифицированном месиве.

Чем онлайн-сервис удобнее расширений и программ

Скачать сайт можно и расширением для браузера, и старой десктопной качалкой. У онлайн-сервиса есть практические плюсы. Ничего не надо ставить и настраивать: он работает с любого устройства, где есть браузер, хоть с рабочего ноутбука, хоть с чужого компьютера. Рендер идёт на сервере в настоящем Chrome, поэтому тяжёлые скрипты и защита от сохранения мешают меньше, чем расширению внутри вашей вкладки. А главное, для подобной проверки расширению потребуется отдельно настроенное окружение: подставить прокси нужного ГЕО, метки площадки и мобильное устройство, чтобы получить именно оффер, а не вайт. Здесь это встроено рядом с обычным скачиванием.

Скачивание видео: mp4, HLS и обфусцированные VSL

Видео это отдельная головная боль всех качалок, потому что его редко можно просто скачать по ссылке. Здесь закрыты три случая сразу, и это одна из самых сильных сторон сервиса.

Прямой файл mp4 браузер обычно грузит кусками по мере просмотра, поэтому наивная качалка забирает лишь фрагмент. Сервис докачивает такой файл целиком. Потоковое видео в формате HLS, которое раздаётся десятками мелких сегментов, собирается полностью: сервис читает плейлист, тянет все сегменты и склеивает их в единый mp4, который играется офлайн двойным кликом. Самый тяжёлый случай, обфусцированные плееры видеосейлов, где сегменты зашифрованы и защищены от прямого скачивания, решается перехватом медиа прямо в момент проигрывания. Видео собирается из того, что плеер декодирует у себя, и мультиплексируется в обычный mp4. В итоге забирается даже тот ролик, который по прямой ссылке отдаёт ошибку.

Скачать сайт из веб-архива

Иногда нужного сайта уже нет в живых, но он есть в Wayback Machine. Сервис умеет снимать страницу прямо из веб-архива по дате. Достаточно включить режим снапшота и указать нужный день. При этом обёртка самого архива, панель и служебные скрипты web.archive.org, вырезается, и вы получаете чистую страницу, как будто скачали её с живого домена. При желании часть ассетов можно дотянуть с текущего домена, если они ещё доступны.

«Пробить кло»: как забрать оффер из-под клоаки

Это главная функция для тех, кто льёт трафик. Разберём по шагам, потому что здесь и кроется вся ценность.

Что такое клоака и почему обычное сохранение не работает

Клоака это фильтр на стороне рекламодателя, который решает, что показать посетителю. Модератору, боту и случайному человеку по прямой ссылке она отдаёт безобидную белую страницу. Живому покупателю, который пришёл по рекламе из нужной страны с нужного устройства, она отдаёт настоящий оффер. Поэтому если просто вставить ссылку оффера в любую качалку, вы скачаете именно вайт, пустышку. Чтобы увидеть оффер, клоаку нужно убедить, что к ней пришёл реальный покупатель.

Как сервис имитирует живой клик

Сервис подставляет параметры окружения, похожие на рекламный переход. Это не доказывает неразличимость для фильтра. Он подставляет мобильное устройство на свежем Android с актуальной версией Chrome, эмулирует внутренний браузер приложения, из которого обычно идёт трафик, добавляет клиентские подсказки и реферер площадки. Для клоаки это выглядит как живой человек с телефона, а не сервер из дата-центра. После этого сервис открывает целевую ссылку и сохраняет доступный ответ. Фильтр может по-прежнему вернуть белую страницу.

Прокси и режим «без прокси»

Клоака смотрит на страну по IP, поэтому для чистого пробива нужен прокси из целевого ГЕО. Сервис принимает SOCKS5 и HTTP прокси в разных форматах записи и сам поднимает мост, потому что браузер не умеет напрямую работать с некоторыми типами. В режиме «Без прокси» сайт открывается с исходящего IP сервера сервиса. Местоположение вашего браузера на этот запрос не переносится; для нужного ГЕО задайте прокси. Мёртвый или медленный прокси сервис распознаёт быстро и говорит об этом понятной ошибкой, а не висит две минуты в ожидании.

Метки Facebook, Google и TikTok

Одного IP мало. Клоака часто проверяет, что в ссылке есть метки рекламной площадки, а в куках, следы клика. Поэтому в форме выбирается источник: Facebook и Instagram, Google или TikTok. Под каждый источник сервис аккуратно дописывает нужные параметры перехода и клик-куки, если их ещё нет в ссылке. Ваши собственные метки при этом не трогаются. Для клоаки картина складывается: правильная страна, правильное устройство, правильный источник и живые куки.

Почему иногда приходит белая страница

Клоаки нередко крутят несколько вариантов и показывают их по своим правилам. Бывает, что на почти одинаковый клик она отдаёт то оффер, то лёгкий вариант, то вайт. Это не сбой сервиса, а поведение самой клоаки, которая так защищается от проверок. Если пришла пустышка, помогает повторить пробив, сменить прокси на другой адрес того же ГЕО или поменять источник трафика.

Что попадает в архив

После пробива вы получаете полноценный оффер: лендинг со стилями и картинками, встроенное видео, которое играется офлайн, и всю структуру страницы. То есть не скриншот и не кусок, а рабочую копию того, что видит покупатель. С такой копией удобно разбирать оффер, тестировать свои прелендинги и понимать логику связки.

Надёжность: без зависаний и пустых архивов

Тяжёлые сайты с гигабайтами медиа умеют вешать подобные сервисы намертво. Здесь на этот случай встроены таймауты и частичная выдача. Если сайт не укладывается в отведённое время, сервис не отдаёт ошибку и пустоту, а упаковывает то, что уже успел скачать, и отдаёт рабочий архив. Есть ограничения на размер, чтобы один жадный сайт не съел все ресурсы. Готовые архивы хранятся ограниченное время после скачивания, так что за чистотой следить не нужно.

Как пользоваться: пошагово

Чтобы скачать обычный сайт, вставьте ссылку в основную форму, при необходимости включите «Скачать все страницы сайта» или режим веб-архива с датой, нажмите кнопку и дождитесь готового архива. Прогресс виден прямо на странице.

Чтобы пробить клоаку и забрать оффер, откройте блок «Пробить клоаку», вставьте ссылку оффера, выберите источник трафика, укажите прокси нужного ГЕО или включите режим без прокси, при желании отметьте загрузку всех страниц оффера и запустите. Скачивание видео может занять пару минут, это нормально, потому что ролик выкачивается целиком. На выходе тот же ZIP.

Что важно знать перед скачиванием

Пара честных нюансов, чтобы не было сюрпризов. Готовый архив хранится ограниченное время после скачивания, поэтому забирайте его сразу. Очень большие сайты с гигабайтами медиа могут прийти частично, ровно настолько, насколько успели скачаться за отведённое время, при этом отдельные страницы и ресурсы могут не работать. Резидентные прокси работают медленнее дата-центровых, так что тяжёлый оффер с видео через такой прокси качается дольше. И редкие ссылки на сторонние страницы, которые сам оффер не подгружает при открытии, в архив могут не попасть, потому что браузер их просто не запрашивает.

Кому и зачем это нужно

Соло-байерам и командам сервис экономит время на разборе чужих связок: не надо просить дизайнера пересобирать лендинг, можно взять готовый и переупаковать. Спай-аналитикам он даёт возможность увидеть реальный оффер под клоакой, а не гадать по вайту. Тем, кто работает с видеооферами, важно, что видео действительно выкачивается, а не остаётся битой ссылкой. И всем пригодится возможность достать страницу из веб-архива, когда живого сайта уже нет.

Как устроена клоака и почему модератор и обычный посетитель видят разные страницы, мы разбирали в статье что такое клоакинг и как он работает. Цепочку редиректов ссылки можно посмотреть редирект-чекером.

Частые вопросы

Коротко о главном

Скачать сайт целиком, забрать чужой лендинг с видео, достать страницу из веб-архива и пробить клоаку, чтобы увидеть настоящий оффер, всё это делается в одном месте и без установки программ. Для арбитражника это ежедневный рабочий инструмент: меньше рутины на разборе связок, больше времени на тесты и открутку. Попробовать можно прямо сейчас на down-web.ru.

Больше про арбитраж, клоакинг и полезные сервисы, в нашем Telegram-канале BoostClicks. А если нужна своя клоака для Гугла, посмотрите BoostRouter.