Те, кто как я, начал использовать Интернет через телефонные модемы (Dial Up), помнят бытовавшую в 90 годы 20 века и начале нулевых шутку про то, что самая большая скорость передачи данных — это грузовик КАМАЗ, заполненный дисками CD ROM. Действительно, даже теоретически достижимая скорость Dial Up модемов составляла 56 кбит/с, реально же речь шла о 33.8 кбит/c, а до них о 14.4 кбит/c. Емкость среднего CD ROM составляла 700 мБайт (да, не забываем, что в байте 8 бит и в каналах связи скорость считается побитово, а в устройствах хранения побайтово), так что действительно, чтобы выкачать один диск CD ROM, надо было где то 50 часов модемного коннекта на скорости 33.8 кбит/c без обрывов (что само по себе маловероятно).
Баш, 2005 год
Скорости доступа в сеть растут (хоть и не у всех), но и емкость накопителей тоже. И в 2016 г Amazon решила претворить в жизнь старую шутку . Она представила грузовой прицеп AWS Snowmobile для хранения и перевозки данных.
Основная сфера применения — перемещение данных от заказчика в облако Amazon. Но думаю им можно воспользоваться и при переезде из одного дата-центра в другой.
Емкость AWS Snowmobile составляет фантастические 100 петабайт (один петабайт это 1048576 гигабайта). Размеры прицепа 3×2,5×14 метра, вес около 27 тонн. При температуре воздуха более 30 градусов нужна будет внешняя система охлаждения.
К системе заказчика AWS Snowmobile подключается как внешнее запоминающее устройство. Данные автоматически шифруются 256-битным шифрованием (с помощью AWS Key). Впрочем обладатели таких колоссальных данных скорее всего хранят их в уже зашифрованном виде.
Полное заполнение этой суперфлешки на колесах занимает 10 дней при максимально возможной скорости загрузки/выгрузки данных 1 Тб/с (через несколько запараллеленных интерфейсов 40Гб /с).
У прицепа неплохой аппетит. Во время работы (загрузки/выгрузки данных) AWS Snowmobile потребляет до 350кВт (можно вспомнить, что передвижные энергопоезда времен Великой Отечественной войны имели выходную мощность порядка 500кВт). Предоставить эту мощность должен заказчик. Или арендовать у Amazon передвижной электрогенератор.
После заполнения контейнер запирается, герметизируется, ставится на охрану и GPS трекинг. Отдельно Amazon может предоставить охрану (стоимость информации в таком грузовике может быть колоссальной)
Amazon завлекает заказчиков расчетом, что перемещение одного эксабайта данных с помощью AWS Snowmobile займет полгода, а по линии связи со скоростью подключения 10Gb/s — 26 лет.
В заметке Как перевести Google на перфокарты, общий объем данных Google оценивался в 15 эксабайт, то есть 150 таких грузовиков.
При этом предупреждают, что AWS Snowmobile предназначен только для загрузки данных в облако Amazon, выгрузка данных из облака к заказчику производится с помощью Snowmobile не будет.
Цена использования такого дата-центра на колесах полцента за гигабайт в месяц. То есть для 50 петабайт 0,005*10485768*50 = 262144$ в месяц.
Потенциальные клиенты по версии Amazon:
Возможные применения включают миграцию 100 петабайт данных, таких как видео-библиотеки, геномные последовательности, сейсмические данные, финансовые отчеты или закрытие устаревших центров обработки данных…(перевод смысловой, не дословный)
Подробности на сайте Amazon
Презентация AWS Snowmobile (включена с отметки 58 секунд, полная версия на ютубе)