Cloud Storage | S3 хранилище
Бесконечно масштабируемое хранилище
Объектное хранилище позволяет сделать хранение файлов приложений масштабируемым, то есть объем хранилища автоматически увеличивается по мере роста объёма хранения. Также оно устойчиво к нагрузкам — пользователи не будут страдать от того, что контент плохо грузится из-за большого числа обращений. Объектное хранилище легко интегрировать с современными приложениями. Вы сможете добавлять в хранилище любое количество контента или других файлов, а потом быстро получать к ним доступ из любой точки мира.
Хранение файлов с записями событий в хронологическом порядке, обычно это протоколирование работы системы и записи внешних событий, например, информации о посетителях сайта/приложения.
Компании обязаны хранить корпоративную документацию на протяжении нескольких лет, например, финансовую отчетность — 5 лет, а заключения независимой экспертизы — 50 лет. Под электронный архив удобно использовать объектное хранилище с холодным хранением данных, то есть хранилище, оптимизированное под хранение данных, к которым редко требуется доступ.
Также в объектном облачном хранилище для компании можно хранить записи систем видеонаблюдения или телефонных переговоров, истории транзакций, малоиспользуемые документы, бухгалтерскую и финансовую отчетность. Поскольку аренда облачного хранилища высвобождает место на локальном сервере, такие архивы часто переносят в облако.
Часто данные компании попадают под действие законов о персональных данных, например, это данные клиентов или сотрудников. Тогда объектное хранилище от российских провайдеров, обеспечивающее выполнение 152-ФЗ и хранение данных в России, снимет с вас необходимость обеспечивать выполнение законодательных требований самостоятельно.
Хранилище с API S3 в облаке позволяет обращаться к файлам через HTTP(S)-доступ. Это значит, что если в хранилище выложить файл с доступом к нему, то пользователи могут обратиться к нему по URL. Это идеальное решение для видеохостингов, фотобанков и фотостоков.
Для таких задач не подходят «обычные» хранилища данных, в том числе — жесткие диски и облачные хранилища других типов, например, такие, где пользователи хранят свои фото: они не оптимизированы под параллельный доступ многих пользователей. Видеохостинг или фотобанк должен выдерживать тысячи запросов к выложенному контенту. Объектные хранилища реализованы таким образом, что число обращений пользователей к объектам практически не замедляет доступ к ним.
Большие данные собирают многие компании, чтобы потом проанализировать их и использовать для прогнозирования и принятия решений. Совместимое с S3 хранилище позволяет хранить огромные массивы информации, которую при необходимости можно использовать. Это подходит для любых отраслей, где нужно собирать и хранить большие объемы неструктурированных данных. В ритейле: хранение данных о покупателях и транзакциях для анализа покупательского спроса, прогнозирования выручки и ассортимента, сегментации клиентов. В страховании и банковском деле: хранение страховой и кредитной информации для выявления мошенничества и анализа рисков. В логистике: хранение данных о транспортировке грузов, перемещении автомобилей, сроках доставки для последующей оптимизации транспортных расходов.
С помощью объектного хранилища можно систематизировать и хранить огромный объем результатов научных экспериментов для дальнейшей обработки. Также там можно хранить результаты лабораторных анализов, тестов и другую медицинскую информацию клиник и лабораторий, которую нужно хранить из-за требований законодательства либо для дальнейшего обращения к ней. Неограниченный объем объектного хранилища подходит для хранения массивов данных генетических исследований: спектрограмм, геномов, протеомов, последовательностей ДНК.
Хранилище с API S3 в облаке позволяет обращаться к файлам через HTTP(S)-доступ. Это значит, что если в хранилище выложить страницу сайта в виде HTML-файла, люди смогут обращаться к нему (например по URL). Поэтому в объектном хранилище можно хранить статические страницы сайта, то есть страницы, информация на которых обновляется редко. Нужно просто загрузить файлы страниц в хранилище объектов и настроить доступ к ним. Использование облачного хранилища экономит дисковое пространство на сервере, на котором размещается сайт, и сокращает расходы на обслуживание инфраструктуры: не нужно покупать и обслуживать собственные серверы для хранения данных. Кроме того, в облачные системы хранения данных можно загрузить почти бесконечный объем информации.
Хранилище S3 в облаке идеально подходит для хранения мультимедийных файлов: изображений, видео, аудио, графики. Его можно использовать для создания архивов с такими файлами. Как правило, это большие объемы информации, которые выгоднее перенести в виртуальное хранилище данных в облаке, чем бесконечно увеличивать размер дискового пространства. Это подходит для СМИ и телеканалов: хранение архивов публикаций, видео- и фотоматериалов, выпусков телепередач; киностудий: хранение видеозаписей фильмов и рабочих видеозаписей; полиграфий и типографий: хранение фотографий, графики, других медиаматериалов; цифровых библиотек: хранение оцифрованных публикаций и книг.
В объектном хранилище данных можно хранить бэкапы важных данных. Вы настраиваете интервал автоматического сохранения, например: раз в сутки, неделю или месяц, по нему будут обновлять данные в облачном хранилище резервных копий. Если в основных приложениях произошел сбой или случайное уничтожение информации, ее можно восстановить из облака. Также можно настроить версионное сохранение, когда в облачном хранилище бекапов одновременно хранятся резервные копии многих версий, включая старые.
Объектные хранилища также применяют для создания «бэкапа» не просто данных, а целых рабочих инфраструктур. Это позволяет использовать механизмы аварийного восстановления и быстро восстанавливать работу сервисов при сбоях и катастрофах без простоя и потери данных.
Стоит дисковое хранилище HDD на 1 ТБ. По опыту, утилизация зарезервированных дисков ≈60%, это увеличивает стоимость хранения 1 ТБ «чистых данных» до 11600₽.
Стоит 1 ТБ в объектном S3-хранилище в режиме «холодных данных». Оплачивается только хранимый объем, он утилизируется на 100%. В стоимости, помимо объема хранения, учитывается объем скачивания и другие операции.
Для аренды дискового хранилища в оптимальном объеме пользователям приходится регулярно менять объем дисков: чтобы зарезервированные и оплаченные мощности не простаивали, но и чтобы не случился их дефицит.
Объектное хранилище решает эту задачу автоматизировано. Оно масштабируется вверх и вниз без дополнительных настроек и готово принять экзабайты данных. Для оптимизации объема хранения объектам можно настроить жизненные циклы.
Объектное хранилище позволяет исполнять код, когда с объектом происходят события (events) по универсальным правилам, с помощью технологии веб-хуков. Например, при добавлении фото автоматически создается его превью, отправляется запись в лог, создается «зеркало» в другом хранилище.
Пример построения подобного event-driven приложения на Хабре
Облачные дисковые хранилища не оптимальны для задач раздачи контента (например, стриминга видео), поскольку имеют ограничения по скорости одновременного скачивания.
Объектное хранилище создано, чтобы преодолеть эти ограничения, поддерживает любой объем скачивания без замедления, со скоростью 1 Гбит/с.
Для быстрой доставки контента хранилище можно интегрировать с CDN (сетью доставки контента), имеющем более 400 точек присутствия во всем мире и емкость канала 1,5 ТБит/с.
Режим хранения Glacier с мгновенным доступом
к данным по низкой цене от 0,5 ₽/ГБ
подходит для длительного размещения данных.
Оно представляет собой сервис для хранения любых объектов, взаимодействует с приложениями через программный интерфейс — S3 API. Сервис рассчитан на сохранение и извлечение любых объемов данных, обеспечивает надежную и масштабируемую инфраструктуру, доступную из любой точки мира. Управление корпоративным хранилищем данных осуществляется через простой интерфейс панели управления в личном кабинете пользователя MCS.
Большая часть современных компаний работает с огромными объемами данных, которые надо, во-первых, где-то хранить, а во-вторых — не потерять среди них что-нибудь важное. Объектные облачные хранилища для компании легко справляются с решением этих проблем. Их используют, когда традиционная система хранения с множеством файлов и папок становится неудобной и неэффективной.
Сервис подходит для хранения больших объемов информации: аудио и видеофайлы, документы, сообщения чатов, письма, хранение данных для бэкенда приложений, данные о покупателях. Он подходит в том числе и для высоконагруженных проектов, для работы которых требуется размещение и раздача большого количества контента.
В отличие от базы данных, в нем возможно размещение практически любых данных: видео, документы, фото и так далее, в любом формате
В облачном хранилище S3 нет ограничений по объему данных или количеству хранимых объектов, объем размещаемых данных практически бесконечен.
Экономичность. Перенос данных в облако не требует капитальных вложений в оборудование и инфраструктуру и обслуживающего их персонала. Кроме того, вы оплачиваете услуги облачного хранилища по факту, только за используемый объем. В большинстве случаев это выгоднее, чем хранить данные в собственном дата-центре.
Автоматизация. Объектное S3 cloud-хранилище позволяет автоматизировать управление данными: при загрузке или удалении объектов могут запускаться автоматические процедуры, например — автообработка фотографий или видео. Автоматическое управление данными можно применять в различных областях: бизнес-аналитика, проектирование и делопроизводство, торговля и бухгалтерия.
Масштабируемость. В S3 storage можно хранить практически неограниченное количество и объем объектов. Чтобы локально хранить растущий объем информации, нужны дополнительные расходы на развертывание и обслуживание инфраструктуры, время на покупку оборудования и его настройку. Например, только для хранения резервных копий необходимо на 200% увеличить дисковое пространство. В облачном S3-хранилище за объем свободного дискового пространства отвечает провайдер. Вам всегда доступно столько, сколько требуется, без необходимости следить за доступным объёмом.
Объектные хранилища реализованы таким образом, что число обращений пользователей к объектам практически не замедляет доступ к ним. Это важно, если нужно предоставить доступ к объектам хранения одновременно многим пользователям. Например — видеохостинг должен выдерживать тысячи запросов к выложенному видеоролику. Для таких задач не подходят «обычные» хранилища данных, в том числе — жесткие диски, базы данных и облачные хранилища других типов, например, такие, где пользователи хранят свои фото: они не оптимизированы под параллельный доступ многих пользователей.
При этом доступ к самому облачному объектному хранилищу данных возможен из любой точки мира, а совокупный объем загружаемых файлов может достигать десятков и сотен петабайт. Кроме того, сервис отличается неограниченной масштабируемостью, простотой администрирования и высокой доступностью.
При загрузке или удалении объектов могут запускаться автоматические процедуры, например автообработка фотографий или видео. Автоматизация обработки данных подходит для бизнес-анализа, проектирования, делопроизводства, торговли и бухгалтерии.
Наши ЦОДы находятся на территории Российской Федерации. Виртуальные серверы аттестованы в соответствии с ФЗ-152 (сохранение персональных данных на территории РФ).
Неограниченное количество статических внешних (белых) IP-адресов.
Объектные хранилища взаимодействуют с приложениями через программный интерфейс — то есть, через команды, которые хранилище и приложения передают друг другу. В хранилище MCS протокол S3 API является основным.
Это набор команд на языке сервиса, в ответ на которые он выполняет разные действия. С их помощью любая сторонняя программа или приложение могут взаимодействовать с облачной инфраструктурой, отправляя к ней запросы и получая ответы. Наличие стандартного интерфейса у хранилища позволяет без проблем его использовать большинству приложений и систем.
Полнота поддержки такого S3 API определяет функциональность сервиса. Главная особенность решения от MCS — полная совместимость с S3-протоколом.
Стоимость хранения S3 в облаке рассчитывается по объему — вы платите только за те ресурсы, которые использовали. Входящий трафик не тарифицируется. Оплата снимается за каждый текущий расчетный период и рассчитывается посекундно, что позволяет обеспечить максимально точный расчет стоимости потребленных ресурсов.
Вы можете оптимизировать расходы, подобрав оптимальный вариант оплаты: выбрать тариф с меньшей стоимостью трафика и большей стоимость хранения, если к объектам нужен частый доступ, или наоборот, с большей стоимостью трафика и меньшей — хранения, если вам требуется хранить значительный объем данных с редким доступом к ним. Также мы предлагаем минимальную тарификацию за размещение архивов, доступ к которым нужен очень редко.
здесь есть ответы на большинство вопросов по настройке сервисов
через форму обратной связи, и мы оперативно ответим