Вся правда о облачном хранении данных

Сегодня многие пользователи выгружают свои файлы в облака, и мы, как правило, считаем, что данные будут храниться там вечно, всегда готовые к загрузке и доступу (ну, или хотя бы тогда, когда вы подключены к Интернету).

Что представляет собой облачное хранилище

Но правда об облачном хранилище заключается в том, что оно, фактически представляет собой лишь множество жестких дисков, и ваши файлы доступны только до тех пор, пока провайдер облачного сервиса остается в бизнесе, а те форматы, в которых сохранены ваши данные, все еще используются существующим программным обеспечением. Кроме того, обеспечение доступности всех ваших файлов требует гораздо больше внимания и усилий, чем вы могли бы себе представить.

Конечно, все цифровые файлы – это просто последовательности битов и байтов, отличающихся друг от друга тем, как они структурированы, но на самом деле не все так просто.

Например, обычный текстовый файл имеет расширение, указывающее на то, что это текстовый файл, и его нужно читать с использованием стандарта ACSII или Unicode, позволяющим, например, прочитать последовательность битов 01101000 01101001, как «hi». Аналогичные правила применяются и к более сложным форматам файлов. Все это работает прекрасно до того момента, когда формат теряет популярность, программное обеспечение становится неактуальными, или происходит то и другое вместе.

К примеру, когда в последний раз вы прослушивали песню, записанную в формате RAM или WMA? Как много файлов с расширением .mov или .wmv вы загружаете для просмотра видео? Когда технология переходит от фирменных форматов носителей данных, таких как Real Media, Windows Media и QuickTime к общепринятым стандартам, вроде MPEG-4 и MP3, то программное обеспечение для проигрывания этих файлов либо устаревает, либо перестает поддерживаться. Даже действующие сегодня форматы не гарантируют безопасности. Компания Fraunhofer IIS, фонд, предложивший нам формат MP3, отошел от этого распространенного сегодня типа файлов для музыкальных записей, и агитирует за принятие таких форматов, как AAC и FLAC.

Будущее ваших устаревших файлов

Очевидно, что нам необходимо сохранять возможность читать или автоматически конвертировать устаревшие форматы данных, чтобы поддерживать непрерывный доступ к ним, поскольку многие люди полагаются на облачные хранилища для создания резервных копий данных. Это на десятки лет продлит ценность данных на жестких дисках серверов в распространяющихся центрах обработки данных. Вероятно, с этой работой могут справиться онлайновые конверторы, хотя, реально это должно выглядеть примерно так: пользователи выгружают файлы на сервер, сервер выполняет всю работу по изменению форматов (структуры битов и файлов) этих файлов, и добавляет новое расширение. Это позволяет пользователям загружать затем полученные файлы в требуемом формате, когда им эти данные нужны.

Такой подход должен стать более распространенным с более новыми поколениями форматов, которые медленно, но неизбежно будет приниматься достаточно большей экосистемой программного обеспечения. После более десятилетия популярных, распространяющихся облачных хранилищ и петабайтов данных, выгружаемых в них сотнями миллионов людей, мы, несомненно, должны столкнуться с устареванием форматов этих файлов.Могу ли я получить свои данные сейчас?

Так как же обеспечивается защищенность и доступность всех тех петабайтов данных, которые мы загружаем в облака? Ведь компьютеры стареют, и серверы выходят из строя, умирают, и заменяются. Как центры обработки данных справляются как с рутинными, так и с аварийными задачами, поддерживая для пользователей заявленную готовность в 99.9%?
Ответом на этот вопрос может быть увеличение количества серверов, особенно в кластерных конфигурациях, в которых непрерывно создаются копии данных активных серверов согласно запланированной синхронизации и, при необходимости, к линиям связи подключаются запасные серверы. Но иногда даже этого резервного копирования оказывается недостаточно, и центры обработки данных обращаются к магнитной ленте. Да, хотя они и считаются реликтами ранней истории компьютеров, магнитные ленты сегодня не только живы, но и является процветающей средой хранения данных. И хотя может казаться странным, что ваш фильм, снятый на современный мобильный телефон с качеством изображения в 4K, рано или поздно оказывается в шкафу для хранения данных, поддерживаемого технологией, про которую вы думали, что она используется только в пыльных правительственных офисах и демонстрируется в музеях, реальность именно такова.

Ведь, в конечном счете, облачное хранение должно обеспечить доступ к вашим файлам, независимо от того, что происходит с используемым вами устройством. Магнитные ленты могут быть зашифрованы и безопасно хранить ваши данные в течение 30 лет, не искажая их, в то время как жесткие диски серверов могут выйти из строя уже через пять лет. Причиной того, что магнитные ленты вышли из широкого употребления является трудоемкость записи и считывания данных. Это медленный, сложный процесс по сравнению с невероятной скоростью современных твердотельных дисков. Но если они используются только для хранения файлов на случай отказа сервера, или для удовлетворения юридических требований, магнитные ленты представляют идеальную альтернативу внешним жестким дискам, которые обычно выходят из строя примерно через пять лет.

Поэтому в качестве итога можно сказать, что легкость использования и распространенность облачного хранения данных кроется в сложной и малопривлекательной системе хранения ваших данных на бесчисленных жестких дисках и магнитных лентах, кроющейся за легким в использовании фасадом, позволяющим перетаскивать файлы мышкой. Результаты такого подхода оказываются крайне полезными, и в центрах обработки данных, задействованных в облачном хранении, работают эксперты, понимающие возникающие проблемы и постоянно противостоящие им. И до тех пор, пока ваш провайдер остается в бизнесе, шансы того, что ваши данные в безопасности и могут быть легко получены, подкрепляются десятками серверов. А может быть, даже и магнитными лентами, хранящимися в подвале с управляемым климатом.

Может ли быть опасным хранение информации на серверах крупных корпораций? Мы попытались разобраться в этом в статье: Что Google знает о нас?