Архивирование Интернет

Все компоненты модульного дата-центра размещены в обычном грузовом контейнере.
Все компоненты модульного дата-центра размещены в обычном грузовом контейнере.

Многие библиотеки давно уже ставят перед собой задачу архивирования Интернет. Так недавно я уже писала про проект Австрийской национальной библиотеки, а сегодняя речь пойдет о всемирном проекте Wayback Machine, который архивирует Интернет с 1996 года.

Поводом поговорить об этом проекте стала пуликация в журнале “Компьюлента” статьи о переезде организатора проекта Некоммерчекой организации Internet Archive на новую аппаратную площадку.

Бесплатная служба WayBack Machine представляет собой огромный архив веб-страниц. Здесь можно посмотреть, как тот или иной сайт выглядел десять лет назад, почитать новости за 1998 год или рецензии на гаджеты пятилетней давности. Сохраненные страницы выводятся именно такими, какими они были, то есть со всеми ссылками, изображениями и т. п.

За годы работы в интернет-архиве накопились десятки миллиардов страниц; серверам службы ежесекундно приходится обрабатывать до 500 запросов. В такой ситуации старых аппаратных мощностей стало не хватать, и организация Internet Archive решила расширить возможности системы за счет установки модульного центра обработки данных компании Sun Microsystems.

Аппаратная площадка Sun Modular Datacenter насчитывает 63 сервера Sun Fire x4500, оснащенных двух- и четырехъядерными процессорами с архитектурой х86. Каждый сервер имеет доступ к массиву из 48 жестких дисков емкостью 1 Тб. Таким образом, общая емкость подсистемы хранения данных достигает трех петабайтов.

Новый модульный дата-центр установлен в кампусе Sun в Санта-Кларе (Калифорния, США). Финансовая составляющая договора между организацией Internet Archive и компанией Sun не раскрывается.

One Comment

  1. hi!,I really like your writing so much! share we communicate extra about your post on AOL? I need an expert in this house to resolve my problem. Maybe that is you! Taking a look ahead to see you.

Комментарии запрещены.