Безумный гениальный план AWS по переносу ваших данных в облако

2016 год был, безусловно, продуктивным для Amazon Web Services. Помимо штурма облака и доминирования в секторе, они удвоили свои усилия, чтобы передать в облако все до последней души и байта. Предприятия, которые уже мигрировали в облако, обычно представляют собой компании с данными, которые легко передаются через подключения к данным. Но все еще существует ряд крупных глобальных конгломератов с устаревшими системами стоимостью в миллиарды долларов, которые просто не понимают, как они могут перенести свои огромные объемы данных в облако, особенно с учетом того количества времени и денег, которые уже ушли на создание и тонкой настройки своих устаревших систем. Эти компании находятся под прицелом Amazon.

Как № 1 в сфере облачных вычислений, AWS предлагает нестандартные идеи, чтобы поддержать свою целеустремленность, направленную на то, чтобы никто не был забыт при переходе в облако. Поскольку его новая цель — гигантские корпорации, такие как нефтегазовые компании, фармацевтические компании или те, кто занимается логистикой с огромным количеством данных, Amazon решила, что лучший способ перенести такие большие объемы данных в облако — это физически перенести их. Именно об этом и идет речь в операции «Снежок».

Мчаться по снегу

AWS Snowball — это сервис, который помогает предприятиям передавать большие объемы данных в облако с помощью специально разработанных физических устройств хранения, которые не подключены к Интернету. Просто для ясности: эта услуга предназначена для клиентов, которые предпочтительно имеют более 10 ТБ данных для передачи. Эти хорошо спроектированные устройства выглядят как высокотехнологичный сейф размером примерно с компьютерный шкаф, который прошел испытания на падение и был разработан специально для транспортировки.

Разбивка ваших данных на Snowballs и их передача в облако таким образом не только экономит время и деньги компаний по сравнению с передачей данных через Интернет, но и обеспечивает повышенное чувство безопасности, поскольку Snowballs защищены сервисом управления ключами AWS.

Хотя первоначальный размер Snowball составлял 50 ТБ, AWS быстро увеличила этот лимит до 80 ТБ, а с принудительным шифрованием это действительно жизнеспособный вариант для предприятий, чтобы перенести свои огромные стеки данных в облако, что обычно было бы почти невозможно при обычном использовании. передачи данных через Интернет. Для переноса данных в облако и из облака можно использовать автономный загружаемый клиент Snowball. Кроме того, заданиями можно управлять с помощью консоли управления AWS Snowball Management.

Снежный край

Обновленный Snowball под названием Snowball Edge был анонсирован на прошлогодней конференции AWS re:Invent. Snowball Edge — это устройство для передачи данных емкостью 100 ТБ, которое имеет как возможности хранения, так и вычислительные возможности. Устройство Snowball Edge не только сводит к минимуму настройку и интеграцию, но и подключается к существующим устаревшим системам с помощью стандартных интерфейсов хранения и может объединяться в кластеры, образуя локальный уровень хранения, который может обрабатывать ваши данные на месте. Это гарантирует, что ваши приложения будут работать даже без доступа к облаку. Вы можете думать о Snowball Edge как о действительно продвинутом внешнем диске емкостью 100 ТБ, который может хранить большие наборы данных или поддерживать локальные рабочие нагрузки в удаленных или автономных местах.

Отличительной особенностью Snowball является то, что он использует устройство Kindle в качестве транспортной этикетки, которая автоматически обновляется с каждым интервалом. Когда вы закончите передачу данных и устройство будет готово к возврату, Kindle автоматически обновится, что значительно снизит вероятность ошибки при доставке и потери устройства.

Что касается вычислительной мощности, вы можете развернуть код AWS Lambda на Snowball Edge для локального выполнения анализа или запроса данных. Данные на устройстве Snowball Edge могут храниться и обрабатываться независимо от любого другого вычислительного устройства или вмешательства.

Первоклассный переход в облако

Благодаря успеху гибридного облака AWS, похоже, пробует почву со своими устройствами Snowball, и ситуация кажется правильной. Стремясь снизить барьеры для потенциальных клиентов на пути к общедоступному облаку, AWS нацелена на огромный сегмент крупных предприятий, сталкивающихся либо с географическими проблемами, либо с проблемами пропускной способности при переносе своих данных в облако. Когда вы говорите о предприятиях с миллионами гигабайтов спутниковых изображений или подводных океанографических изображений, ограничения подключений к общедоступным облакам создают серьезную проблему не только для передачи данных, но и для анализа в реальном времени. Устройства IoT печально известны тем, что генерируют огромные объемы данных. Хотя было бы здорово использовать сервисы AWS для анализа этих наборов данных, высокая задержка и низкая пропускная способность делают это почти невозможным.

Другая часть истории заключается в том, что эти конкретные клиенты с большими объемами данных не имеют бюджетных ограничений. Гигантские объемы данных обычно означают, что эти компании являются крупнейшими в своем роде и могут позволить себе первоклассные билеты для передачи своих ценных данных в облако. И это именно те билеты, которые AWS печатает для них.

AWS Snowmobile: безжалостная сила передачи данных

AWS Snowmobile выглядит самым безумным анонсом AWS в этом году и является одним из немногих случаев, когда более новая технология уступает место старой. А под старыми технологиями мы подразумеваем получение ваших данных, загрузку их в грузовик и езду по шоссе со скоростью 80 миль в час. Чистая изобретательность этой идеи очевидна в том факте, что AWS — единственный, кто делает это; никакие другие облачные компании даже не рассматривают эти меры по переносу данных в облако. Однако, если вы посмотрите на это с точки зрения организаций с глубокими карманами, которые оказались в ловушке с огромными объемами данных и не имеют реального способа передать их в облако, лучшего варианта действительно не могло быть.

Странно, что ведущий поставщик облачных услуг в мире прибегает к помощи старых добрых грузовиков с полуприцепами, работающими на бензине, для передачи данных в облако, и это отличный пример того, как старые технологии вступают в игру, когда мы меньше всего этого ожидаем. Никто бы не догадался, что гибридное облако станет предпочтительным вариантом для предприятия, и никому в самых смелых мечтах не пришло бы в голову физически загружать данные в контейнеры и фактически доставлять их. Просто показывает, что весь анализ и технологии в мире не могут эффективно предсказать, куда нас приведут новые технологии и изобретения.

Это классический случай фразы, использованной Фрэнсисом Бэконом в «Очерках» 1625 года, где он сказал: «Если гора не идет к Мухаммеду, Мухаммед идет к горе». Здесь, если предприятие не может передать свои данные в облако, AWS доставит облако на предприятие на 18-колесном 45-футовом грузовике. Не совсем ясно, сколько крупных предприятий заинтересованы в использовании этого варианта на 100 петабайт, что фактически составляет миллион гигабайт хранилища, но DigitalGlobe является одним из первых клиентов Amazon, использующих Snowmobile, и в настоящее время передает 100 петабайт спутниковых изображений в облако. используя этот сервис.

Даже при подключении со скоростью 1 Гбит/с загрузка 50 ТБ данных в облако занимает в среднем около четырех дней. При той же скорости для передачи 100 петабайт потребуется большая часть 25 лет. В целом, это был мастерский ход со стороны AWS. Остается посмотреть, собираются ли другие поставщики облачных услуг, такие как Microsoft и Google, прибегать к этим нестандартным и кажущимся нелепыми, но эффективными мерам для передачи данных своих клиентов в облако.