Cold Storage в хмарі: Amazon, Google, Microsoft міняють ринок хмарних сервісів зберігання даних



Оскільки обсяг даних, якими оперують різні компанії зростає, а ці дані потрібно десь зберігати, найбільші провайдери хмарних сервісів стали пропонувати своїм клієнтам «холодне зберігання даних. По всій видимості, cold storage сервіси можуть зайняти якусь частину ринку традиційних послуг зберігання даних.

При цьому cold storage як хмарного сервісу може значною мірою змінити спосіб роботи компаній з даними, включаючи зберігання інформації і її доставку. Amazon Web Services, Google Cloud Platform, і тепер ще і Microsoft Azure пропонують клієнтам cold storage сервіс. При цьому у кожного з названих сервісів свої особливості.

Практично всі аналітики роблять прогнози про подальше зростання ринку хмарних сервісів, причому зростання цього, судячи з усього, буде бурхливим. Аналітичне агентство Gartner нещодавно заявило, що в цьому році витрати на хмарні сервіси і послуги будуть для компаній основною частиною витрат на ІТ. Крім того, оскільки зараз все популярнішими стають гібридні хмари, до 2017 року близько половини великих компаній скористаються цією можливістю.

Наскільки великий обсяг даних генерується щорічно? За оцінкою Cisco глобальний трафік дата-центрів вже давно перевищив відмітку в один зеттабайт. У 2014 році обсяг трафіку становив 3,4 зеттабайта, в 2019 році, за прогнозами, цей показник зросте до 10,4 зеттабайт. Дуже швидкозростаючим сегментом трафіку в дата-центрах є «хмарний трафік», обсяг якого в 2019 році складе близько 8,6 зеттабайт.

Розуміючи перспективи послуги cold storage, Google і Amazon вже досить давно пропонують своїм клієнтам скористатися сервісами «холодного зберігання даних. Корпорація Microsoft вирішила приєднатися до Google, Amazon і в квітні запустила Cool Blob Storage, сервіс з низькою вартістю зберігання «холодних даних».

Для чого все це?
Всі три компанії позиціонують свої cold storage сервіси як недорогу послугу зберігання неактивних і маловостребованных даних, включаючи бекапи, медіаконтент, наукові дані, архіви. Загалом, будь-які дані, які відносно рідко запитують, можна вважати «холодними».

При цьому час доступу до даних у cold storage сховище набагато вище часу доступу до звичайної інформації при роботі з традиційними сервісами зберігання даних. Вартість зберігання «холодних даних» нижче, ніж вартість зберігання інформації, до якої потрібен постійний оперативний доступ.

Google Nearline: корпорація Google вперше представила свій сервіс зберігання архівної інформації в 2015 році. Це рішення швидко стало популярним з кількох причин. Основна — це швидкий доступ до холодних даними, всього кілька секунд. Це швидше, ніж у того ж AWS Glacier. Згідно з Google, Nearline трохи відрізняється від стандартних хмарних сервісів компанії. Тут трохи нижче доступність і трохи вище затримка доступу. Час доступу до даних в середовищі Google Nearline становить від 2 до 5 секунд. Це дійсно непогано. Але є кілька проблем.



Головне — це обмеження ширини каналу в 4 МБ/с для кожного зберігається терабайта. Відповідно, якщо вам потрібно завантажити все і відразу — не вийде, доведеться почекати. Правда, є можливість прискорити процес за допомогою функції On-Demand I/O. Ця функція дозволяє збільшити ширину каналу з обговорених 4 МБ/с. Але ця функція відключена за замовчуванням.

Вартість зберігання даних становить близько 1 цента за гігабайт на місяць. Це відносно небагато, плюс час доступу до холодних даними в 3-5 секунд робить Google Nearline одним з лідерів ринку. Сервіс дозволяє зберігати великі обсяги даних з доступом до неї через Google Cloud Platform Storage API.

Крім того, у Nearline є ще й можливість запланувати імпорт даних з різних локацій, включаючи Amazon S3, HTTP/HTTPS сайти і т. п. Все це можна автоматизувати.

Amazon AWS Glacier: це одне з перших на ринку рішень щодо зберігання холодних даних. Компанія позиціонує AWS Glacier як безпечний і дуже недорогий сервіс для зберігання архівних даних і бекапів. Зберігати можна великі масиви інформації, вартість послуги не висока, і починається від 1 ціна за гігабайт на місяць. AWS Glacier можна настроювати під власні потреби. Для деяких типів збережених даних можна налаштувати час доступу у кілька годин. Мови про кількох секундах тут не йде, але у Glacier свої переваги. Так, 1 ТБ даних можна завантажити за чотири години. Користувач Google Nearline за той же час зможе завантажити лише 5% пакета даних об'ємом 1 ТБ, із загальним часом завантаження приблизно 70 годин.



Компанія пропонує зберігати тут ІТ-медіаресурси, дані охорони здоров'я, наукові дані і працювати з Glacier замість носіїв на магнітних плівках.

У середовищі Glacier дані зберігаються в архівах». Зберігатися може будь-яка інформація, включаючи фото, відео або документи. Максимальний об'єм одного «архіву» (це своєрідна одиниця обсягу збережених даних в Glacier) становить 40 ТБ. Завантажувати і зберігати можна необмежену кількість таких архівів. У кожного з них — унікальний ID, з присвоєнням часу створення. Після того, як «архів» створений, оновити збереженої в ньому інформацію не можна, її можна лише завантажити, коли в цьому виникне необхідність. Щоб відсікти користувачів, які використовують сервіс не за призначенням, за видалення даних раніше трьох місяців зберігання беруть певну плату.

Переглядати і управляти збереженими даними можна за допомогою AWS Management Console і AWS SDK. Для кожного з наборів даних застосовуються наступні операції: створення, видалення, перегляд вмісту, тегування, встановлення набору політик та інше.

Microsoft Cool Blob Storage: служба сховища Azure передбачає два рівня для сховища BLOB-об'єктів (сховища об'єктів), щоб дані можна було зберігати найбільш ефективно в залежності від їх використання. «Гарячий» рівень сховища Azure оптимізований для зберігання часто використовуваних даних. «Холодний» рівень сховища Azure оптимізований для зберігання даних, які використовують рідко і довго зберігають.

Microsoft Cool Blob Storage — це холодний рівень, це сервіс оптимізований для зберігання даних, до яких рідко здійснюється доступ, і які повинні зберігатися протягом довгого часу. Вартість зберігання інформації — від 1 до 5 центів за гігабайт на місяць. Все залежить від регіону і загального обсягу збережених даних. Для порівняння, вартість зберігання «гарячих» даних у Microsoft становить від $0.0223 до $0.061 за гігабайт на місяць. За оцінками представників компанії, в ряді ситуацій зберігання холодних даних приблизно вдвічі дешевше, ніж гарячих.



При цьому компанія дозволяє передавати дані з холодного сервісу зберігання в гарячий і назад. Правда, ця послуга платна. В рамках одного облікового запису можна зберігати 500 ТБ. Максимальна кількість облікових записів сховища на підписку — 100. Цільова пропускна здатність для одного файлового ресурсу — до 60 МБ в секунду.

Загалом-то, сервіси зберігання холодних даних від Microsoft, Google, Amazon можна назвати конкурентами з певною натяжкою. Справа в тому, що вони відрізняються один від одного і набором функцій, і характеристиками. Лідера тут немає, і поки що навряд чи він з'явиться. Зате користувачам є з чого вибрати — для будь-яких вимог знайдеться своє рішення. Головне — нові сервіси поступово змінюють конфігурацію ринку традиційних сервісів зберігання даних, і можна бути впевненим у тому, що «холодних» хмарних сервісів буде з'являтися все більше.
Джерело: Хабрахабр

0 коментарів

Тільки зареєстровані та авторизовані користувачі можуть залишати коментарі.