«Архив Интернета» переехал на новую аппаратную площадку

Некоммерческая организация Internet Archive открыла новый центр обработки данных, которому предстоит удовлетворить растущие потребности проекта Wayback Machine.

Бесплатная служба WayBack Machine представляет собой огромный архив веб-страниц, информация в котором накапливается с 1996 года. Здесь можно посмотреть, как тот или иной сайт выглядел десять лет назад, почитать новости за 1998 год или рецензии на гаджеты пятилетней давности. Сохраненные страницы выводятся именно такими, какими они были, то есть со всеми ссылками, изображениями и т. п.

За годы работы в интернет-архиве накопились десятки миллиардов страниц; серверам службы ежесекундно приходится обрабатывать до 500 запросов. В такой ситуации старых аппаратных мощностей стало не хватать, и организация Internet Archive решила расширить возможности системы за счет установки модульного центра обработки данных компании Sun Microsystems.

Аппаратная площадка Sun Modular Datacenter насчитывает 63 сервера Sun Fire x4500, оснащенных двух- и четырехъядерными процессорами с архитектурой х86. Каждый сервер имеет доступ к массиву из 48 жестких дисков емкостью 1 Тб. Таким образом, общая емкость подсистемы хранения данных достигает трех петабайтов.

Новый модульный дата-центр установлен в кампусе Sun в Санта-Кларе (Калифорния, США). Финансовая составляющая договора между организацией Internet Archive и компанией Sun не раскрывается.