不仅有0.0075元的深度冷归档,更有对下一代云存储的重新定义

阿里云云栖号 阿里云云栖号     2022-12-10     310

关键词:

前言:重新定义下一代云存储,需要继续保障稳定、安全、可靠和低成本,进一步演进 Serverless 能力,智能适配负载变化,提供智能数据管理能力以及全场景覆盖不断发展的新负载。

阿里云存储的创新活力,不仅拓展了云存储的边界,更为客户如何挖掘数据无限价值方面,带来了更多的可能。11月4日,阿里巴巴集团高级研究员、阿里云智能存储产品线总经理吴结生,在云栖大会上做了《重新定义云存储,释放数据无限价值》的主题分享。

吴结生认为,目前企业数字化转型处于加速阶段,但仍存在一些问题,比如数据年增长率为40%,只有 10% 被存储;实时数据和实时分析的比例虽然快速上升,但被分析使用的数据比例也仅占30%。因此,在降本增效方面,企业既需要以更低的成本存储更多数据,也需要不断提高挖掘数据价值的效率,并降低使用和管理成本。为了真正地帮助企业应对这些挑战,阿里云存储持续打磨技术架构,不断更新和升级产品能力。

一、深度冷归档存储类型及归档直读能力发布,优化存储成本

在存储技术上,想要提升数据存储和调用性能,降低存储介质成本,利用各类存储介质特点,依据数据重要性去分级存储至关重要。

阿里云对象存储OSS可提供12个9的数据持久性,99.995%的数据可用性,有标准、低频访问、归档、冷归档四种类型,可以容忍区域性的故障,以及满足一些行业的合规要求。用户可以根据实际需求,灵活选择存储类型。通过基于最后一次访问时间(Last Access Time)策略的生命周期规则,可以让数据自动冷热分层,成本优化达90%。

吴结生表示,为了进一步降低归档成本,阿里云此次重磅发布了对象存储OSS的深度冷归档类型,价格仅为0.0075元 /GB/月,1TB一年仅需92元!是业界最低成本的存储,适用于对海量、访问频次低的数据进行归档和管理。低成本的背后,其实是高科技的加持,更是IT软硬件体系的一次完美重构。

第一, 超高密度的存储,包括服务器、机架和集群。单机架的密度达到 18PB,单集群达到 EB。

第二, 是降低电力的消耗,智能的磁盘上下电和数据放置策略,降低75%的电力消耗。

第三, 自研的高效率纠删码,在保障可靠性的前提下,磁盘的使用效率达到90%以上。

第四, 极致使能硬件的能力,包括磁盘和网络,包括叠瓦式 SMR HDD 磁盘的使能,借助 SMR HDD 盘的成本优势来降低成本。

归档存储和冷归档存储类型Object恢复为可读取状态需要一定的解冻时间,也会额外收取数据解冻费用,这对一些企业用户而言会影响体验。因此,此次阿里云存储还正式发布了归档直读能力,消除数据解冻的步骤,客户应用不需要修改,直接对标准、低频和归档数据进行分析,实现大容量、低成本、长期保存数据,让存储更加节能和绿色。

二、存储即服务,Serverless大行其道

在业务的数字化和智能化转型中,核心应用系统上云是关键,包括数据库、推荐系统和实时数据分析系统等。这些应用系统面临的最大挑战是资源的配置来应对业务负载的波动。

Serverless 的发展为云中运行的应用程序提供了一种全新的系统体系架构,为万物互联提供了更加宽广的想象力,云计算全面Serverless化正在如火如荼地展开。今年推出的云盘ESSD AutoPL,是业界第一家把云盘进行 Serverless 化的创新,具有云的弹性伸缩和按量计费的两大优势。

它解耦了容量和性能,自动根据业务负载提供相应的性能,提供按需所用和按量付费。在刚刚进行的双11活动中,ESSD AutoPL表现优异,既为业务节约了成本,也简化了业务资源的规划,保障了峰值负载下面的业务体验。阿里云的某电子商务客户,通过使用AutoPL最多降低了66%的成本。核心系统的另一个诉求是超低延迟的块存储,ESSD PL-X 提供30微秒的延迟、300万IOPS、12GB 的带宽能力,为高性能数据系统带来更多可能。

业务应用对存储的要求,不仅需要高性能,也需要性能稳定和可预期。自2018年开始,阿里云存储大规模使用RDMA技术,通过过去五年积累的经验和教训,自研了 Solar-RDMA协议,结合阿里巴巴自研的 HPCC 流控和端网融合技术,网络和存储的协同设计,硬件加速等能力,提供了平稳的高性能存储网络,在全链路进行了服务质量的保障。在这些创新的加持下,ESSD PLX 的 P999 延迟只有 40微秒,AutoPL也实现了秒级别的动态弹性伸缩能力。

三、数据湖3.0方案升级,助力企业业务创新

基于数据湖的数据分析架构是云上部署的重要选择,开放的数据湖存储,可以大幅提高数据价值挖掘的效率。许多企业在用的大数据分析和智能决策系统的现代化架构,是基于OSS数据湖存储的数据分析架构。

近期,阿里云数据湖存储架构在四个方面进行了全面升级:

第一, 以更加开放的方式与开源系统对接,实现多协议、多引擎的支持。

第二, 访问带宽的全面提速,每PB 100Gbps 的高吞吐能力。

第三, 简化数据管理,统一命名空间,让云上云下数据便捷流动;WORM技术可有效防止数据被篡改。

第四, 数据的自动分层进一步降低成本;数据的共享实现一份数据多个引擎分析。

四、Alibaba Cloud Lens 发布,让运维更智能

随着云原生时代的到来,云上资源愈发复杂,架构更加多样,如果缺乏有效的云管理能力,将不可避免造成巨大的资源浪费和成本支出。

为了帮助用户清晰地透视云产品的内部行为,阿里云日志服务 SLS 近期发布了云产品可观测平台 Alibaba Cloud Lens,让用云和管云变得更简单。通过 Alibaba Cloud Lens,为客户提供云产品的用量分析、访问分析、异常检测、安全分析、性能监控、数据保护等服务,从成本、性能、安全、数据保护、稳定性、访问分析六个维度,提供云产品的精细化运维辅助分析能力,让企业在保障业务敏捷性的前提下,低门槛地实现对云产品可观测。

比如 Alibaba Cloud Lens for OSS,可以暴露不合理配置和高危操作给出优化建议,多维度展示资源用量信息,自定义设置异常告警信息、及时发现可用性问题,展示行为情况辅助产品使用和业务运营分析等。Alibaba Cloud Lens for EBS 还可以帮助监控和管理资源,快速掌握资源消耗及数据保护现状,提升资源使用效率的同时,也可及时发现数据丢失的风险。

随着技术、模式、业态创新成为数字经济的常态,需求端的常态化创新将向基础设施端传导,敏捷高效成为数字基础设施的刚需。在这样的背景下,云存储需要继续保持稳定安全可靠,需要持续的成本优化的能力,需要进一步提升 Serverless化能力,需要降低使用和管理的复杂度,需要充分释放云存储的弹性、按需所用、按量计费和资源精简分配的优势。唯有如此,才是真正的下一代云存储,才能真正帮助客户释放数据无限价值。

原文链接

本文为阿里云原创内容,未经允许不得转载

冷备份和热备份

...1、是非常快速的备份方法(只需拷文件)  2、轻易归档(简单拷贝即可)  3、轻易恢复到某个时间点上(只需将文件再拷贝回去)  4、能与归档方法相结合,做数据库“最佳状态 查看详情

比flinkkafka更有深度!做大数据一定要牢牢掌握的现象级技术!

自数据中台的概念被大厂带火以来,市面上涌现了大量以“数据中台、大数据中台”为名义的服务商。定位很简单:为数量庞大的中小型企业提供类似数据中台的软件服务,帮助他们管理、盘活自家的数据资产。为什... 查看详情

比flinkkafka更有深度!做大数据一定要牢牢掌握的现象级技术!

提起业务流量,除了全民抢票平台12306,当数阿里最有发言权。上到双十一千亿级流量洪峰,下到日均百万、千万交易量的平台,每个业务模块背后的高并发架构理念,无处不在。成熟的架构设计只是其一࿰... 查看详情

冷备份恢复与异机还原

...,直接拷贝物理文件的备份方式,备份数据库可以运行在归档模式,也可以运行在非归档模式。备份流程:1)首先在运行的库中得到运行的所有文件。主要备份文件:passwordfile、spfile、controlfile、datafile、tempfile、l 查看详情

oracle数据库如何备份与恢复

...辑上的)。物理备份又可以根据数据库的工作模式分为非归档模式(Nonarchivelog-style)和归档模式(Archivelog-style),通常,我们把非归档模式称为冷备份,而相应的把归档模式称为热备份。冷备份是指在数据库关闭的情况下对数... 查看详情

函数计算gb镜像秒级启动:下一代软硬件架构协同优化

...低了绝对延迟。本文在此基础上,介绍借助函数计算下一代IaaS底座神龙裸金属和安全容器,进一步降低绝对延迟且能够大幅降低冷启动频率。作者|修踪来源|阿里技术公众号一背景函数计算在2020年8月创新地提供了容器镜... 查看详情

如何深度复制向量指针的值(不仅仅是指针)?

】如何深度复制向量指针的值(不仅仅是指针)?【英文标题】:HowtoDeepCopyValuesofVectorPointer(Notjustthepointer)?【发布时间】:2021-01-0604:24:07【问题描述】:我有一个运算符和函数,其目标是将向量指针的值复制到向量。我读过只要... 查看详情

函数计算gb镜像秒级启动:下一代软硬件架构协同优化

简介:本文将介绍借助函数计算下一代IaaS底座神龙裸金属和安全容器,进一步降低绝对延迟且能够大幅降低冷启动频率。作者:修踪背景函数计算在2020年8月创新地提供了容器镜像的函数部署方式。AWSLambda在2020年12月... 查看详情

深度学习:从头设计一个tensorflow3一样的新一代深度学习系统,到底需要把握哪些要点?

深度学习工具潮流滚滚,各种工具层出不穷。也有各种文章从易用性,可移植性,灵活性和效率方面对于各个系统进行比较。这篇文章希望从系统设计上面来讲来回答这个讨论这个问题:如果想到从头设计一个TensorFlow3一样的新... 查看详情

渲染管道像素阶段“深度测试”

...挡远处的物体。1.1原理它通过将深度缓存中的值和当前片元的深度进行比较,计算是否需要更新深度缓存和颜色缓存,如果不需要则将该片元丢弃,如果通过了,则由开发者决定是否用这个片元的深度来覆盖原有... 查看详情

:新一代深度学习编译技术变革和展望

...;陈天奇回答了目前深度学习编译技术的瓶颈在哪里,下一代技术是什么?2021年12月16日,第四次TVMCon如期在线举行。从大约四年多前行业的起点开始,深度学习编译技术也从初期萌芽阶段到了现在行业广泛参与的... 查看详情

热点数据和冷数据是什么

...部分数据可能还没有再次访问到就已经被挤出内存,不仅占用内存,而且价值不大。频繁修改的数据,看情况考虑使用缓存对于热点数据,比如我们的某IM产品,生日祝福模块,当天的寿星列表,缓存... 查看详情

在 Angular 2 + TypeScript 中深度复制数组

】在Angular2+TypeScript中深度复制数组【英文标题】:DeepcopyanarrayinAngular2+TypeScript【发布时间】:2016-05-3123:13:09【问题描述】:我有一个作为输入的对象数组。让我们称之为content。当试图深拷贝它时,它仍然有对前一个数组的引用... 查看详情

天源:sibros与nxp合作为下一代联网汽车推出深度ota平台

据报道,高级汽车互联的深度空中下载(OTA)平台制造商Sibros宣布与恩智浦半导体(NXPSemiconductors)达成合作。此次合作中,Sibros提供预先集成的系统解决方案,并将其深度连接平台(DeepConnectivityPl... 查看详情

谷歌jax:下一代深度学习框架大战的前夜(代码片段)

机器学习工具的革命:下一代深度学习框架大战的前夜本文来自人工智能社区http://studyai.com/article/a6b60b7f1、介绍让我们回到一个更简单的时代,当所有人在机器学习中谈论的都是支持向量机和增强树(BoostedTree),而Andre... 查看详情

陈天奇高赞文章:新一代深度学习编译技术变革和展望

...;陈天奇回答了目前深度学习编译技术的瓶颈在哪里,下一代技术是什么?2021年12月16日,第四次TVMCon如期在线举行。从大约四年多前行业的起点开始,深度学习编译技术也从初期萌芽阶段到了现在行业广泛参与的... 查看详情

基于zstack构建深度学习云平台

...为完备的深度学习云平台。1、ZStack简介  ZStack是下一代开源的云计算IaaS(基础架构即服务)软件。它主要面向未来的智能数据中心,通过提灵活完善的APIs来管理包括计算、存储和网络在内的数据中心资源。用户可以利用... 查看详情

apifox和apipost有什么区别?那个更有优势(接口工具)postmanjmeter等等

...哪个开发平台都能看到他们的推广。对于这些疑问小张Bob深度分析,做大伙 查看详情