0
“以后可能几乎每一个公司都会是一个IT公司”。
中国正处于数字化转型关键时期,新技术和新应用驱动创新和增长,数据的快速增长以及应用模式的转变是未来数据生态圈的大势所趋。
据《国家数据资源调查报告(2021)》数据显示,2021年全年,我国数据产量达到6.6ZB,同比增加29.4%,占全球数据总产量(67ZB)的9.9%,仅次于美国(16ZB),位列全球第二。
数据之于企业发展的重要性早已不言而喻,目前我国各行各业都想通过数据为业务增长赋能,但亚马逊云科技大中华区产品部总经理陈晓建分析认为,数据增长将会带来三个方向的关键问题:
关于敏捷和成本,即如何应对海量数据增长所带来的成本急速上升与数据存储服务敏捷性能之间的矛盾;
关于数据多样化需求,即如何设计不同的存储服务,满足不同业务对来自不同渠道、不同采集方式、不同性质的业务数据的需求;
关于数据安全与合规。
一定程度上来说,数据增长利好企业数字化转型,可以通过数字价值,为企业数字化转型赋能,创造建立新的价值理念。但正如陈晓建所言,如果数据管理不好,也会带来很大的问题,尤其对服务商而言。
Nagarro(奈佳罗)作为一家从事数字资产SaaS平台研发的公司,业务遍布26个国家,服务5000多家企业级用户,这就意味着其要管理近兆亿级的各种类型图片、各种格式的视频、PDF、office 文档和PSD等文件。
“多区域下爆发式增长的数据量,对Nagarro构建数据资产SaaS平台带来了巨大挑战,”Nagarro中国区的首席架构师郭亮提到,主要集中在存储成本、传输效率、容量预测、可靠性和灾备、数据安全五大方面:
存储成本:遍布欧洲中部、德国、北美、加拿大等多区域的5000+企业用户储存包括图片、视频、音频、文档等类型的TB级数字资产,数据温度变化难以判断,难以把数据存储在正确的存储层以降低成本;
传输效率:客户需要批量传输数据或实时浏览大文件,而网络带宽难以保证,磁盘物理极限难以突破;
容量预测:客户使用量不可预期,容量的快速拓升和流量潮汐难以应付;
可靠性和灾备:需保障7*24小时不间断服务,99.99%高可用性,在指定时间段内任意时间点完整恢复,以及人为因素、机器故障、自然灾害时,区域整体宕机可恢复;
数据安全:需对数据进行动、静态数据加密保护,达到多租户数据隔离,禁止越界访问。在合规方面,必须严格遵从欧洲,北美专属数据安全法令以及行业专属数据安全法HIPPA、PCI。
郭亮举例道,为了节省存储成本,早在2012、2013年时就希望通过智能管理存储方式,降低运营成本。但当时亚马逊Amazon S3还没有这个功能,所以我们采取冷热两个阶段来实现;进入到2019年,终于有了智能分层的解决办法,这时我们就可以放心地使用分层服务,做到不用人工地关心数据的访问频度,通过分层服务自动地将文件存在不同的层里。这样就在保障数据安全的前提下,大大降低了存储成本。
据了解,几年前Nagarro在存储成本上一个月要花费十几万美金,但通过采用亚马逊Amazon S3智能分层服务后,在客户量翻倍的情况下,存储成本节省了70%左右。
此外据了解,针对数据增长给用户和服务商带来的挑战,亚马逊云还专门构建了不同的云存储服务满足需求多样性。
对此,陈晓建提到:企业在云端有各类不同的业务场景,对共享文件存储有着不同的要求,比较主要的企业应用主要分为四类:
Windows为主的应用,底层服务要完全满足Windows的环境,包括ACL文件访问控制权限,包括Active Directory兼容。
高性能计算,不可能通过单个节点完成,一定是多节点协同的,数据是共享的。我们可以看到真正在跑的高性能集群往往是几百个节点,甚至几千个节点共享一份数据,这样就带来一个问题,首先第一个需要共享的存储,第二个由于这份数据要被几百个、几千个节点同时访问,所以对整个存储的性能和吞吐率也提出了非常高的要求。
基于各类多种多样的企业应用,这些应用要上云我们必须完美的兼容和支持好之前提供的功能。
大数据环境往往需要一些特殊的支持,包括像ZFS,需要具备高吞吐、低延时的技术。
针对企业应用中四个主要的不同的场景,亚马逊云专门构建了一个场景化应用FSx家族,X意味着多种文件存储类型,专门为企业不同业务需求构建。
面对统一数据保护问题,往往存在很多数据备份的问题,首先很多系统都是使用起来非常复杂的,第二,怎么保证安全合法合规的要求,第三,由于做备份一定会带来额外的成本。对此,亚马逊云推出了Amazon Backup 一站式备份服务,可支持15种以上的数据源备份。
目前,在互联网科技高速发展以及数字化转型向好发展的情况下,数据在不断上涨,成本也会随之增加,安全问题也会逐渐暴露,现在以及未来,如何在数据爆发式增长的情况下,以更低的成本,更安全的服务交付,将成为企业不断向前发展的目标。
在降低成本的前提下,保障数据安全运营仍需要很长一段路要走。
(雷峰网(公众号:雷峰网)雷峰网雷峰网)
雷峰网原创文章,未经授权禁止转载。详情见转载须知。