程序员

阿里云存储最佳实践——115科技

作者:admin 2021-04-12 我要评论

更多存储标杆案例 欢迎点击下方链接查看 阿里云存储标杆案例样板间 公司介绍 广东一一五科技股份有限公司(简称“115科技”),是国内最早一批从事云存储研发的高...

在说正事之前,我要推荐一个福利:你还在原价购买阿里云、腾讯云、华为云服务器吗?那太亏啦!来这里,新购、升级、续费都打折,能够为您省60%的钱呢!2核4G企业级云服务器低至69元/年,点击进去看看吧>>>)

更多存储标杆案例
欢迎点击下方链接查看

阿里云存储标杆案例样板间

公司介绍
广东一一五科技股份有限公司(简称“115科技”),是国内最早一批从事云存储研发的高新技术企业 ,致力于为个人及组织提供高可靠性和高安全性的云服务,推动云计算技术与人们生活、工作的深度融合。115科技旗下核心产品之一“115个人”(原“115网盘”)是国内最早一批上线的云盘产品,目前也是国内用户量最庞大的网盘产品之一。

image.png

业务场景介绍
115科技在2018年,“115个人”就已积累了100PB的数据,由于业务发展快,基础建设追赶艰难,虽然多年来115个人的业务稳定运营,但却在IT基础架构运维上投入了大量的人力,不仅成本高,而且效率低、压力大。为了突破这样的瓶颈,115科技决定把专业的事情交给专业的人做,把精力都投入到业务上。

百PB数据迁移,业务不能中断

百PB级别的挑战:业务不中断,服务不停机

由于数据规模巨大,本次迁移遇到了前所未有的挑战,比如在迁移过程中,如何保证数据的一致性,让数据不丢失、不错乱;同时又能实现多通道并发迁移提升迁移效率;再比如,如何让整个迁移过程中整体服务不停机,客户无感知。

数据迁移路径长,确保数据的安全性是个难题

100PB数据迁移,涉及多样化数据类型,多种迁移方式并行,整个迁移方案复杂度极高。在迁移过程中,不仅要保证数据的一致性与迁移效率,同时数据安全也是迁移过程中的重中之重。

多种迁移方式,为115提供最佳迁移方案
1.多种迁移方式结合
于适合线上迁移的数据,阿里云采用了专线互连的传输方式,建立边界路由器和路由器接口来连接115的数据中心与阿里云VPC,采用400Gb/s的分布式在线数据传输服务OSSImport,将115的数据加密迁移到对象存储OSS中。对于不适合在线迁移的数据,阿里云提供离线数据迁移方案——闪电立方,它可防尘防水,抗震抗压。每套闪电立方可容纳480TB数据。同一时间多种迁移方式并行工作,帮助115从预计的4个月时长大幅缩短到了45天。

2.高效定制,只为快速迁移
为了提升传输效率,阿里云存储研发团队在10天内设计了11个功能,包括SHA-1校验边算边传、WORM(一写多读禁止覆盖))、HEIF与矢量图片转换支持等特性,用于承载115科技的非结构化数据如文档、图片、视频的业务,最终帮助115完成了100PB数据的迁移。

提供完善的数据安全保护机制

在数据迁移的过程中,阿里云针对每个文件都进行了数据加密,同时对每个文件都做端到端的SHA-1校验,确保迁移效率与数据安全的同时,还能很好地避免出现数据不可用或者不一致的情况,保证每一比特都有迹可循。

115.png

达到的效果
此次合作中,阿里云为115科技量身定制了高效、稳定的迁移方案,整体迁移仅耗时45天,创造了新的“中国速度”。 同时,充分保障用户数据安全,整个数据传输过程严格遵循“加密→解密→进库”规范,一步都没有省。现在115科技也正在深度使用阿里云的ECS、CDN、DTS、SLB、OSS、MongoDB等服务,基于阿里云优质的网络与分发等服务,不少用户反馈,访问网盘更加流畅,下载速度也更快了。


本文转自网络,原文链接:https://developer.aliyun.com/article/783479

版权声明:本文转载自网络,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。本站转载出于传播更多优秀技术知识之目的,如有侵权请联系QQ/微信:153890879删除

相关文章
  • 四两拨千斤——你不知道的VScode编码Ty

    四两拨千斤——你不知道的VScode编码Ty

  • 我是如何在 Vue 项目中做代码分割的

    我是如何在 Vue 项目中做代码分割的

  • position:sticky 粘性定位的几种巧妙应

    position:sticky 粘性定位的几种巧妙应

  • 从零到一搭建React组件库

    从零到一搭建React组件库

腾讯云代理商
海外云服务器