加入收藏 | 设为首页 | 会员中心 | 我要投稿 衡阳站长网 (https://www.0734zz.cn/)- 数据集成、设备管理、备份、数据加密、智能搜索!
当前位置: 首页 > 云计算 > 正文

隐藏在云数据迁移中的6个瓶颈

发布时间:2018-05-02 13:47:02 所属栏目:云计算 来源:站长网
导读:将PB级字节的数据移动到云端是一项艰巨的任务。人们可能知道,在云端中访问时,其应用程序的行为会有所不同,成本结构会有所不同,并且需要一些时间来移动所有数据。 当企业用户认为网络速度是一个令人头疼的问题时,希望能够得到帮助。但在帮助企业克服这

如果数据准备涉及复制、导出、重新格式化或存档,本地存储可能成为瓶颈。可能需要设置专用存储来分阶段准备好的数据。这具有允许许多系统并行地进行准备的优点,并且减少了用于可运送媒体和数据传输软件的联系点到只有一个系统。

云迁移瓶颈#5:数据传输

将网络传输与媒质传输进行比较时,很容易只关注发送时间。例如,通过快递可能会发送80TB的AWS Snowball设备,从而实现很快的表观数据速率。但是这忽略了获取设备、配置和加载设备,准备返回设备,以及允许云计算供应商在后端复制数据所需的时间。而这样做的客户定期报告说,这样的周转时间(从设备订购到云中可用的数据)是常见的。这将设备运输的实际数据传输速率降低到每秒300兆比特,如果设备没有完全填充,则会大大降低。

网络传输速度同样取决于许多因素,最重要的是本地上行链路。尽管做好充分的数据准备可以减少企业需要发送的数据量,但无法以比物理比特率更快的速度发送数据。传统协议(包括云计算供应商默认用于对象存储的那些协议)在长距离全球互联网路径上的速度和可靠性方面存在困难,这可能导致实现该比特率变得困难。而用户如果采用CloudDat等加速软件的千兆互联网连接,可达到每秒产生900兆比特的速率,是AWS Snowball的净吞吐量的三倍。

物理运输和网络传输之间的最大区别也是概念验证期间最常被忽视的问题之一。通过物理装运,加载到设备上的第一个字节必须等到最后一个字节全部复制之后才能发货。这意味着如果加载设备需要几周的时间,那么一些数据在到达云端时会过时几周。即使数据集达到总体实际传输速度可能更快的PB级别,在迁移过程中保持优先数据流动的能力仍然可能有利于关键资产的网络传输。在数据准备的过滤和优化阶段进行仔细的计划是必不可少的,并且可能允许采用混合方法。

将数据导入云计算提供商可能不是数据传输步骤的结束。如果它需要复制到多个区域或提供商,请仔细规划如何到达那里。通过互联网上传是免费的,而AWS例如对于区域间数据传输的收费高达每千兆字节2美分,对于其他云计算供应商而言,每千兆字节需要收取9美分。这两种方法都将面临带宽限制,这可能会受益于传输加速软件,如CloudDat.

云迁移瓶颈#6:云扩展

一旦数据到达云端的目的地,其迁移过程只完成一半。首先检查校验和,这将确保到达的字节与发送的字节匹配。这可能比人们可能意识到的更复杂。文件存储使用可以隐藏刚刚上传的数据损坏的缓存层。这种损坏非常罕见,但在清除所有缓存并重新读取文件之前,人们无法确定任何校验和。重新启动实例或卸载存储确实可以容忍清除缓存。

验证对象存储校验和需要将每个对象读出到一个实例中进行计算。与流行的观点相反,对象“电子标签”作为校验和是无用的。使用多部分技术上传的对象只能通过读取它们来验证。

一旦传输的数据得到验证,在企业的基于云计算的应用程序和服务可以使用它之前,可能需要进一步提取和重新格式化和分发。这与在场所发生的准备和发送几乎是相反的。

扩展数据的最后一步是验证它是正确和有用的。这是上面讨论的信息验证计划的另一方面,也是了解是否真正完成的唯一方法。

云迁移更多的是关于流程而不是数据。即使看似简单的文件分发任务也需要复杂的迁移步骤,以确保生成的云计算基础架构与所需的工作流程相匹配。而围绕云计算技术的大量宣传,从成本节约到可扩展性都是有道理的。但仔细规划和预测困难对于确定实现这些回报所需的工具和方法至关重要。

(编辑:衡阳站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读