Как скачать сайт целиком из кэша Google?
Если нужный вам сайт был недавно удален, но Archive.org не сохранил последнюю версию, что можно сделать, чтобы получить его контент? Google Cache поможет это сделать. Все, что вам нужно, это установить вот такой плагин - https://www.downthemall.net/
1 - Установите плагин DownThemall в свой браузер.
2 - Откройте Google.com в браузере и установите «100 Результатов на странице» в меню «Настройки» - «Настройки поиска». Это даст вам больше загружаемых страниц кэша за один клик. К сожалению, 100 результатов являются максимальными в поиске Google:
3 - Найдите в Google все кэшированные страницы нужного вам сайта. Просто введите в поле поиска вот такую строку: site: yourwebsite.com. Пример с spacex.com:
4 - В плагине DownThemall введите cache в поле "Fast Filtering". Это регулярное выражение выберет все кэшированные страницы. Нажмите кнопку Download и подождите немного, до тех пор пока загрузка страниц не отановится из за ошибки.
5 - После 100 или более загруженных файлов Google прервет процесс и попросит вас ввести капчу. Плагин DownThemall не может сам вводит капчу, или как-то корректно обрабатывать ее появление, он просто останавливает загрузку. Таким образом, вам нужно вернуться к поиску в Google, открыть любой результат, ввести капчу вручную и возобновить процесс загрузки. Это даст вам следующую партию файлов для загрузки.
Как видите, процесс не полностью автоматизирован, но он довольно быстрый и совершенно бесплатный. Если вы хотите скачать тысячи и миллионы кэшированных страниц, лучше купить какой-нибудь SEO-инструмент с опцией «google cache scraper».
Использование материалов статьи разрешается только при условии размещения ссылки на источник: https://archivarix.com/ru/blog/download-website-google-cache/
Retrace это новый сервис Archivarix для проверки происхождения изображений. Вы даёте ему фотографию, GIF или короткое видео, а он ищет то же изображение в открытой части сети и собирает отчёт: где ещё…
Друзья, привет!
На годовщину Archivarix мы приготовили наше самое выгодное предложение за год: до +100% к сумме пополнения баланса. Такой бонус мы даём только на день рождения сервиса — один раз в го…
У Tube Search появился раздел бесплатных YouTube-инструментов. Это небольшие утилиты, которые решают конкретные повседневные задачи: рассмотреть видео покадрово, вытащить скрытые теги, проверить занят…
Вы нашли на YouTube нужное видео, но не хотите его смотреть целиком ради пары фраз. Или вам нужен текст лекции, чтобы перевести его, процитировать или просто прочитать по диагонали. Субтитры YouTube р…
Откройте любую статью десятилетней давности и пройдитесь по ссылкам в ней. С большой вероятностью часть из них уже никуда не ведёт. Вместо нужной страницы вас встретит ошибка 404, припаркованный домен…
Интернет постоянно осыпается. Страницы уходят в офлайн, аккаунты удаляют, статьи прячут за пейволл, проекты закрывают. Но копии чаще всего где-то остаются: Wayback Machine, archive.today, Common Crawl…
Когда вы находите удалённое видео YouTube через Tube Search, вы обычно получаете метаданные: название, описание, дату загрузки и иногда субтитры. Это уже полезно. Но чтение необработанных субтитров, ч…
Tube Search - это поисковый движок по архивным данным YouTube. Сервис агрегирует информацию из нескольких публичных источников: Wayback Machine (Internet Archive), Common Crawl и различных собранных д…
Со временем внешние ссылки в записях Wordpress неизбежно ломаются, страницы удаляются, домены истекают, видео становятся недоступными. Проверять сотни или тысячи ссылок вручную непрактично. Archivarix…
Триллион сохранённых страниц. Более 99 петабайт данных. Сотни краулов, работающих каждый день одновременно. За этими цифрами стоит вопрос, который задаёт себе каждый, кто профессионально работает с ве…