拒绝云的广告代理可以增强缩放文件
广告内容生产机构HogArth设置为扩展其在Cleversafe对象存储中的存储量,即在2016年初提前部署进一步的容量时近5PB。在Hogarth拒绝云存储后两年来升级到了它的工作负载,并选择In-House对象存储作为磁盘存档存储库。
Hogarth为广告活动提供视频,音频,打印和数字内容。这些通常是全球性的,但必须适应当地市场。此工作流程遍及伦敦,纽约和新加坡的主要位置,卫星站点和43个办事处。办公室通过私有WAN连接连接,主要站点之间的带宽为10GBE。
当生产工作的第一阶段进行完成时,媒体被存档。但文件 - 通常与项目关联的许多inpidual文件 - 必须相当快速地访问更新内容。
主存储在每个站点上的Quantum Stornext阵列上。这些现在作为工作流程的高速缓存运行,但最初提供了Hogarth的所有存储容量。由于这些更接近容量的Hogarth技术副总统Keller,围绕了一个合适的存档层。
凯勒说:“我们是最初的归档。量子阵列跨位置复制。我们接近能力,我们可以扩大,但即使你可以,你也不会愿意。我们不得不认真考虑一个档案系统。“
最初他知道他没有想要录像带。凯勒说:“磁带不会与我们工作的方式兼容。有成千上万的文件与项目相关联。这使得它难以筛选。项目往往是长期存在的,我们需要开辟档案并制作整个数据集的大恢复。“
公共云也看过但拒绝了。“我们看着亚马逊S3,Azure等,但如果您使用复制,则这些TB比Cleversafe更昂贵,因为它们使用复制,因此您可以复制您的成本。此外,由于我们拥有自己的网络,我们不会从云提供商那里获得我们需要的带宽。如果你“重新靠近他们你”陷入困境。带宽不在那里支持我们每天都有的Δ。我们的文件大小为500GB,TBS和数十个TBS,它不会琐碎地移动此数量的数据。“
他加了:“我们想要一个基于磁盘的存档,我们可以快速扫描并到达我们需要的数据集。”
Keller的团队最初部署了大约3PB的Cleversafe容量。它现在订购了另一个1.7pb,将于2016年1月安装。
Cleversafe产品集由三种类型的设备组成:执行管理操作的DSNet管理器; Accesser设备,来自应用程序的前端请求,以及; Slicestor存储节点。
Slicestors House Sata磁盘。访问是通过REST(代表性状态传输)API和Amazon S3,但对于您需要第三方网关等NFS和CIF等传统文件协议。HogArth使用Nasuni Filers到前端请求到Cleversafe对象存储。
Cleversafe本身是多站点的,数据切片存储在多个位置中,以帮助使用擦除编码来抵御弹性。
对象存储提供者(如Cleversafe)使用REST协议在通过元数据识别文件中存储非常大量的数据。
这与传统的文件系统形成对比,该文件使用树状等级结构。这些地方对文件系统限制,因为由于文件系统增长到数百万和数十亿个文件时,性能开销增加。
对象存储旨在以平坦的结构留下这些性能的困难。它使用擦除编码方法的形式保护数据,该方法将对象分开并存储在不同位置的零件。如果丢失,该方法可以重建数据。
凯勒总结了以下好处:“我们可以减掉我们19个勒索斯的八个,系统仍然运行。整体Cleversafe只是对其他磁盘产品和公共云的最佳价值。与我们的10 GBE网络相比,我们的表现明智我们接近线路。有些争论磁带会更便宜,把它粘在旧的煤矿或其他东西 - 但这只是删除磁带的量。“