Petabox Или Где Живет Интернет-Архив Archive.org

Не так давно, 25 октября 2012 года, Интернет-архив (archive.org) сообщил, что объем сайтов, заархивированных из Интернета, превысил 10 петабайт (10 240 терабайт).

Но как и где это все хранится? Некоторые подробности, а также увидеть само хранилище вы сможете узнать благодаря нашему небольшому обзору.

Поскольку Habrastore временно не работает, мы были вынуждены загрузить изображения на сервер ua-hosting.com.ua. Надеюсь, мы справимся, если нет, не пинайте нас слишком сильно, позже загрузим как следует изображения :)

PetaBox или где живет Интернет-архив archive.org

Для хранения такого большого количества данных специально для Интернет-архива был разработан PetaBox. PetaBox — это решение для хранения данных от Capricorn Technologies, разработанное Internet Archive и CR Saikley для хранения и обработки 1 петабайта информации.



PetaBox или где живет Интернет-архив archive.org

Спецификация: — Емкость: 650 терабайт/стойка; — Потребляемая мощность: 6 кВт/петабайт; — Нет кондиционера; вместо этого избыточное тепло используется для обогрева помещений.



PetaBox или где живет Интернет-архив archive.org

Используемая инфраструктура по состоянию на декабрь 2010 г.

: — 4 дата-центра, 1300 узлов, 11 000 жестких дисков; — «Машина времени»: 2,4 петабайта; — Книги/видео/музыка в коллекции: 1,7 петабайт; — Общий объем памяти: 5,8 петабайт.

PetaBox или где живет Интернет-архив archive.org



История создания

PetaBox (tm) был специально разработан сотрудниками Интернет-архива для безопасного хранения и обработки 1 петабайта информации.

Целями развития были: — Низкое энергопотребление: 6 кВт на стойку, 60 кВт на весь кластер хранения; — Высокая «плотность» размещения данных: 100+ Тб/стойка; — Использование локальных компьютеров для обработки данных (800 ПК низкого класса); — возможность использования нескольких операционных систем; — Возможность размещения в стандартных 19” шкафах/стойках; — Возможность размещения в транспортном контейнере 20х8х8 м; — Простота обслуживания: один системный администратор/петабайт; — Программное обеспечение для автоматизации полного резервного копирования (зеркалирования); — Легко масштабируется; — Недорогая конструкция; — Низкая цена хранения.



PetaBox или где живет Интернет-архив archive.org



История

Первая стойка европейского архива емкостью 100 ТБ начала работу в июне 2004 года.

В том же году в Сан-Франциско начала работу вторая стойка емкостью 80 ТБ.

Затем Интернет-архив создал компанию Capricorn Technologies, которая специализировалась исключительно на разработке и внедрении PetaBox.

PetaBox или где живет Интернет-архив archive.org

В период 2004-2007 гг.

Capricorn Technologies производит копии PetaBox для крупных академических учреждений, государственных учреждений и других предприятий.

Их самый крупный продукт использует диски емкостью 750 ГБ.

В 2007 году дата-центр Интернет-архива хранит около 3 петабайт информации с использованием технологии PetaBox. Сейчас мы используем четвертую версию PetaBox, основные характеристики которой: 24 диска на единицу оборудования 4U, 10 таких единиц оборудования в стойке под управлением Ubuntu, 240 дисков по 2 ТБ в одной стойке.



PetaBox или где живет Интернет-архив archive.org



Интернет-архив в контейнере

Ну и в заключение хотелось бы обратить внимание на транспортный контейнер, который был разработан компанией SAN для Интернет-архива.

Емкость контейнера 20х8х8 метров позволит сохранить всю Библиотеку Конгресса США 55 раз! Теги: #Интернет #интернет-архив #wayback-машина

Вместе с данным постом часто просматривают:

Автор Статьи


Зарегистрирован: 2019-12-10 15:07:06
Баллов опыта: 0
Всего постов на сайте: 0
Всего комментарий на сайте: 0
Dima Manisha

Dima Manisha

Эксперт Wmlog. Профессиональный веб-мастер, SEO-специалист, дизайнер, маркетолог и интернет-предприниматель.