什么是微软 Azure 中的冷存储?

2024 年 8 月 29 日 | 阅读 6 分钟

微软在其 Azure 云上开发了一项冷存储服务,为不经常访问的数据提供了低成本的存储选项。

微软的这一声明是对其主要的公共云竞争对手的回应,这些竞争对手已经提供冷存储替代方案一段时间了。亚马逊的 Glacier 服务于 2012 年推出,谷歌的 Cloud Storage Nearline 选项于去年推出。

冷存储背后的基本理念是,虽然人们和企业生成的大部分数据访问频率不高,但它不需要与重要应用程序相同的可用性和访问速度。因此,创建用于保存它的数据中心基础设施可能比核心云基础设施便宜,而云提供商会将节省的成本转嫁给客户。

Cool Blob 存储是微软的新服务,每月每 GB 的费用为 0.01 美元至 0.048 美元,具体取决于区域和存储数据的总量。“热”Blob 存储层级的费用为每 GB 0.0223 美元至 0.061 美元,因此选择“Cool”访问层级的客户将能够节省超过 50% 的数据存储成本。

微软 Azure 云已宣布推出一项冷存储服务,为不经常访问的数据提供了低成本的存储选项。

微软的这一声明是对其最大的公共云竞争对手的迟来的回应,这些竞争对手已经提供冷存储服务一段时间了。亚马逊的 Glacier 服务于 2012 年推出,谷歌的 Cloud Storage Nearline 服务于去年发布。

冷存储背后的基本理念是,虽然人们和企业生成的大部分数据访问频率不高,但它不需要与重要应用程序相同的可用性和访问速度。因此,创建用于保存它的数据中心基础设施可能比核心云基础设施便宜,而云提供商会将节省的成本转嫁给客户。

长期以来,像微软这样规模的网络数据中心运营商一直在寻找通过更好地将设备支出与正在存储的数据类型对齐来节省基础设施成本的方法。

微软已将其新冷存储服务的基础架构保密。然而,在 2014 年,它发表了一篇论文,详细介绍了 Pelican,这是一种用于百亿亿次冷存储系统的核心构建元素。

根据微软的说法,Pelican 是一种专为云中的冷存储而创建的机架级存储设备。它是一种“融合设计”,这意味着从机械系统到硬件和软件,所有东西都经过构建,可以一起工作。

当该研究发表时,Pelican 每 1PB 存储的最高持续读取速率为每秒 1GB,并且可以在单个机架中存储超过 5PB,这意味着整个机架的数据可以在 13 天内转移出来。微软可能已经拥有了下一代冷存储设计,具有更高的吞吐量和容量。

为了充分利用这两种存储方式,即常规访问的 Cool Blob 存储和热 Blob 存储,在延迟和吞吐量方面,Hot Blob 存储的性能相似。在最近的一篇博文中,Azure 存储高级项目经理 Sriprasad Bhat 已经验证了此信息。

Cool 访问层级保证 99.9% 的可用性,而 Hot 访问层级确保 99.9% 的可用性。

为了提高数据的可用性,它会重复数据,这极大地帮助微软为冷访问提供 99.9% 的正常运行时间 SLA,而使用 RA-GRS 冗余选项时,热访问层级的正常运行时间为 99.99%。

因此,社交网络在其核心服务器群附近,在俄勒冈州和北卡罗来纳州建造了单独的数据中心。

这些冷存储设施经过特殊设计和维护,没有任何冗余的电气基础设施或备用发电机。

这些数据中心的设计带来了巨大的能源和设备成本节约,这些节约基于 Facebook 基础设施团队构建的架构。

他们一直在研究战略,以帮助我们管理云中数据存储的费用,因为它正在以指数级的速度增长。根据访问频率、保留期限等标准对我们的数据进行分层是管理存储费用的关键部分。

Cool 数据是消费者数据的常见层级,访问频率不高,但需要与热数据相似的延迟和性能。

备份、媒体材料、科学数据、合规性和归档数据都是冷存储用例的示例。任何未被组织日常访问的数据,并且我们希望长期保留的数据,我们可以将所有这些类型的数据保存在冷存储中。

我们还有一个功能,我们可以选择 Hot 和 Cool 访问层级来存储对象数据,这将完全基于其访问行为,使用新的 Blob 存储帐户。

Blob 存储帐户提供以下功能

  • 性能
  • 性价比高
  • 兼容性
  • 可用性
  • 耐用性
  • 可伸缩性和安全性
  • 全球覆盖

除了 Azure 门户或 PowerShell 门户外,对于管理 Blob 存储帐户,我们还可以使用 Microsoft Azure 存储资源管理器,该工具可用于管理存储帐户中的数据,这是一个基于 GUI 的门户,非常容易使用。

一些第三方组织已经提供了关于他们对冷存储支持的更新

  • Commvault: 对于企业数据管理,我们可以使用 Commvault 的这款软件产品,它是一个以 Windows/Azure 为中心的解决方案。微软再次通过这款新的 Cool Storage 产品增强了其 Azure 产品,我们预计这项服务将成为 Commvault 和微软新客户的主要驱动力。
  • Veritas: 市场领导者 Veritas NetBackupTM,在管理和性能方面保护全球范围内的企业数据 - 适用于任何工作负载、任何存储设备和任何位置。单击此处转到 NetBackup 8.0 Beta 注册和下载页面。
  • SoftNAS: SoftNASTM® 将在不久的将来启用 Azure Cool 存储。
    到 2016 年夏天,客户将能够使用 SoftNAS Cloud NAS 和 Azure Cool 存储作为一种经济高效的解决方案来解决不断增长的存储费用。SoftNAS 使客户能够迁移到云,而无需更改其应用程序,同时也提供企业级 NAS 功能,如重复数据删除、压缩、目录集成、加密、快照等。
  • Cohesity: Cohesity 是世界上第一个企业数据的超融合存储系统。Cohesity 将分散的、低效的二级存储孤岛统一到一个无限的、无限扩展的存储平台中,该平台可在本地或云中使用。
    长期数据保留和归档、将不经常访问的数据分层到云中以及灾难恢复复制是 Cohesity 平台可以轻松且顺利地与 Azure 冷存储集成的三个主要用例。
  • CloudBerry Lab: 它是微软 Azure 备份的工具。在数据离开计算机之前,它使用用户指定的密码对其进行压缩和加密。然后以安全的方式将其发送到云端,无论是按计划还是实时发送。CloudBerry Backup 还包括基于文件系统和图像的备份,以及对 SQL Server 和 MS Exchange 的兼容性,以及可自定义的保留设置和增量备份。根据现在可用的信息,为了存储备份数据,CloudBerry Backup 现在可用,并且它现在也支持 Azure Blob 存储帐户。