从量子加密到机器学习,盘点2015阿里云开放的黑科技

mfmdaoyou mfmdaoyou     2022-09-15     203

关键词:

http://www.csdn.net/article/2015-12-18/2826512
摘要:因为云计算应用的不断深入。以及对大数据处理需求的不断扩大,用户要求功能丰富、性能强大、高可用性的产品,云计算厂商们也推陈出新,不断地推出新产品,本文就盘点了业内翘楚阿里云在2015年那些有价值的新产品。

作为云计算产业热土的中国。2015年产业规模依然保持快速增长。且国内的公有云服务领域有几十家企业在角逐。经过几年的发展,眼下市场逐渐明朗。有些公有云企业已经遥遥率先,而有些企业非常可惜,已经開始掉队。

以下。我们一起盘点下国内云计算生态系统中公认的翘楚阿里云在2015年那些有价值的新产品。

互联网安全的下一个关键技术量子加密

在今年10月中旬的云栖大会上,阿里云与中国科学院旗下的国盾量子联合公布了量子加密通信产品,志着全球互联网迈入量子时代。

眼下量子加密已在阿里云网络环境建立了多个量子安全传输域,通过量子传送门实现同城数据中心互联组网,可以为客户提供无条件安全传输数据服务。而这是全球首家云服务商提供量子安全传输产品落地服务。另外。阿里云通过复杂的算法和软件(特别是更为复杂地对网络和终端进行管控的软件)将加密技术链接到云中,从而实现更高的性价比。

从成本上来说,当下量子计算主要沿京沪干线展开,基于已有光纤,其主成本主要表如今光纤上附加的设备。主要分为两个部分:第一是发送和接收部分;第二是中继设备,这点主要是受限于单光子传播的可靠距离。在这里当下使用的可靠传输距离是50公里。

中国首个可视化机器学习平台DTPAI

今年下半年,阿里云宣布推出国内首个人工智能平台DTPAI,开发人员可通过简单拖拽的方式完毕对海量数据的分析挖掘,以及对用户行为、行业走势等的预測。并且。该平台还集成了阿里核心算法库,包含特征project、大规模机器学习、深度学习等。

DTPAI基于阿里云大数据处理平台ODPS构建(后者可在6小时内处理100PB数据。相当于1亿部高清电影),眼下主要支持鼠标拖拽的编程可视化(Visual Programming)。用户能够实现0代码的算法应用开发。同一时候也支持的据可视化和模型可视化,让用户更直观的了解数据与算法。此外,用户还能够基于阿里云计算平台提供的开发语言和框架来搭建应用或者组件。阿里云计算平台提供自研的计算框架。比如ODPS(SQL、Open MapReduce等)和一些常见的开源产品比如Spark。同一时候针对机器学习,阿里云也对接了开源的比如DMLC等框架和自研的Parameter Server开发框架。

技术分享

DTPAI的机器学习核心库

DTPAI开放的算法支持对ODPS上的数据集上的数据处理和分析的一些基本功能,包含统计、採样、拆分、标准化等。

在机器学习建模和预測的算法有分类和聚类的算法。包含Kmeans、逻辑回归、随机森林、GBDT等。另外用户也能够使用R脚本来封装一个节点逻辑。除此之外。还支持ISV或者用户提供自己开发的第二方或第三方算法。

读写性能超群的高性能存储服务SSD云盘,提升原ECS存储性能20倍。

在证券交易、实时航空预定、搜索引擎等IO密集型应用中,存储系统的IO吞吐量瓶颈已成为很多机构不得不攻克的难题。

阿里今年公布的又一亮眼新品SSD云盘,该产品採用了全新的底层架构与全面优化的技术,全然基于SSD介质的SSD云盘可为虚拟机提供随机I/O訪问的高性能和高可靠块存储。

为了全然发挥SSD硬件的所有性能。阿里团队做了多个优化。当中包含:RPC优化。小报性能从20万添加到50万。内存拷贝优化。EC2优化少掉1 Core CPU;同步转异步,CPU消耗减少2个Core;锁优化。CPU消耗减少2个Core。同一时候,为了保障异常情况下的IO性能稳定性,大量的场景相同被考虑到,比方:网络抖动、server硬件故障等不可避免的异常情况;怎样在假死、真死情况下同一时候保证可靠性和IO性能的稳定性;Chase/replication机制等。当然。为了发挥SSD云盘的所有性能,用户须要採用阿里提供的IO优化实例。

十万核并发处理的基因測序与渲染等行业的批量计算

阿里云今年还公布了支持十万核级别并发的批量计算,该计算适用于影视渲染、生物基因分析、多媒体转码、科学计算、金融保险分析等行业;以真实动画渲染为例。此前单机须要工作520天的计算量可节省至18小时。此外,阿里云批量计算服务可以在PaaS层平台服务提供批量计算框架,帮助用户专注业务逻辑本身。

使用阿里云批量计算的基本方法是:首先用户开通阿里云批量计算服务。创建、上传自己定义镜像到OSS,再由OSS注冊自己定义镜像到阿里云批量计算。注冊成功后,用户就能够上传程序数据到OSS,并创建作业描写叙述(JSon格式)到算法中,待算法完毕任务提交给阿里云批量计算,最后由OSS把作业结果反馈回用户。

据悉,阿里云批量计算是基于阿里云飞天开放平台而实现的。

在这样的大规模并发读取共享文件的场景上。用到了阿里特色的OSS数据动态挂载。OSS数据基于NFS协议挂载到虚拟机上。用户无须改动程序接口,且採用了分布式缓存加速。实现500个节点并发性能达到50MB/S。几个广泛的案例都应用了此技术,如昆塔渲染、视觉云平台、人类全基因组測序分析等。

兼得公共和专用优势的VPC融合网络

经长期測试后,阿里云今年也推出了可构建混合云的VPC服务,通过在公共云上构建一个安全的隔离环境,而且通过专线与已有的客户自有数据中心打通,基于阿里云遍布各地的公有云集群以及顶级的基础网络环境,VPC的推出为客户提供了统一了安全与便捷的混合云体验。

VPC还能够帮助用户构建一个隔离的网络环境,从而实现虚拟网络的全然控制,包含选择自由IP范围、划分网段、配置路由别和网管等。

通过VPC构建的融合网络将具备下面几大特性:成本,专线/VPN的就近接入能力、按需开通和使用、丰富的解决方式和合作伙伴;稳定性。多线容灾和可控网络延时;安全。传输通道的安全保障。

兼容Redis的KV数据库

在7月22日的阿里云分享日上,阿里云宣布正式推出KVStore for Redis。它是第一个全然基于Open API实现控制台的阿里云产品。它也支持即开即用,不须要客户自行部署。同一时候产品提供了完好的可视化统计监控与报警功能。KVStore也支持弹性扩容,当用户数据量随业务发展而增多时,用户仅仅需通过KVStore控制台进行在线扩容就可以,服务本身不中断。

值得一提的是。KVStore支持分布式集群,最大规格能够达到1TB,它提供的内存是全然归用户来存储有效数据的。快照等额外的内存占用是由阿里云server预留公用内存来解决的。不会占用用户配额。对用户更加实惠。另外,KV数据库採取主从双节点架构。实现了主从透明切换。

当主节点出现问题时,能够自己主动切换至从节点,整个过程对用户全然透明。

RDS for PostgreSQL服务:支持MySQL、SQL Server 和PostgreSQL三大关系数据库

年中。阿里云正式推出RDS for PostgreSQL服务,成为国内首家同一时候支持MySQL、SQL Server 和PostgreSQL关系型数据库的云计算服务商。并有如XML、IP、MONEY等丰富的数据类型支持,拥有对复杂查询支持的强大引擎。此外。嵌套事务、分布事物、分析函数、规划试图、递归查询等高级功能也一样不落。如今。用户在云上就能享受PostgreSQL引擎带来的对SQL标准和NoSQL的高度兼容、强大的处理复杂查询能力、以及丰富的插件支持等特性。同一时候还能大幅节省运维成本和硬件投入。

云盾安全网络Quick Shield

阿里今年推出的云盾安全网络是一款针对中小企业的产品。提供了安全的动态CDN服务。负载均衡SLB也将具备七层WAF和CC防护能力。

云盾拥有东半球最大的高防中心,能够轻松应对大流量攻击,确保云服务稳定正常。

对于经典的DDoS防护服务,阿里云将依据客户的安全信誉实施智能黑洞策略,更好地保护客户。

同一时候,用户在选择云盾的时候,不须要再做多次配置。更简单、更便捷。

云计算已经成为备受看好的发展重点。国内外众多企业都投入技术和资金研发云计算及相关产品,无论云计算的发展道路通顺或者坎坷都好。云计算的发展前景无疑是光明的。终于。我们也期待阿里云有很多其它满足企业新业务需求的云服务出现。





阿里云机器学习平台——pai平台

...上,阿里云iDST资深技术专家褚崴给大家带来了《阿里云机器学习平台》的分享,他以机器学习的概念入手展开了此次分享,演讲中他重点介绍了阿里云机器学习平台的基础架构和产品特点,并结合阿里内部的芝麻信用分、推荐... 查看详情

带你认识mindspore量子机器学习库mindquantum(代码片段)

摘要:MindSpore在3.28日正式开源了量子机器学习库MindQuantum,本文介绍MindQuantum的关键技术。本文分享自华为云社区《MindSpore量子机器学习库MindQuantum》,作者:HWCloudAI。MindSpore在3.28日正式开源了量子机器学习库MindQ... 查看详情

阿里云机器学习平台pai之理论基础

...QuickBI,今天进入阿里云大数据的最后部分的学习——机器学习平台PAI,对往期内容感兴趣的小伙伴可以参考如下内容👇:hadoop专题:hadoop系列文章.spark专题:spark系列文章.阿里云 查看详情

阿里云机器学习平台pai之分类实践(代码片段)

💜这篇博客是机器学习PAI的实践部分,主要演示的是分类算法在平台上的使用方法,对往期内容感兴趣的小伙伴可以查看一下内容👇:hadoop专题:hadoop系列文章.spark专题:spark系列文章.阿里云系列:阿里云MaxComputerSQL... 查看详情

阿里云机器学习平台pai之理论基础

...QuickBI,今天进入阿里云大数据的最后部分的学习——机器学习平台PAI,对往期内容感兴趣的小伙伴可以参考如下内容👇:hadoop专题:hadoop系列文章.spark专题:spark系列文章.阿里云 查看详情

更效率、更优雅阿里巴巴开发者工具不完全盘点

...域众多,笔者仅从自己熟悉的领域,以后端开发者的视角盘点平时可能有得到的工具。每个工具按照以下几点进行介绍:Arthas阿里巴巴2018年9月开源的一款Java线上诊断工具。工具的使用场景:Arthas支持JDK6+,支持Linux/Mac/Windows,... 查看详情

量子计算学习:从经典计算机到量子计算机

量子计算经典计算机量子计算量子计算与经典区别量子计算中的数据:qubit单量子态多量子态量子计算中的操作:量子门单量子门双比特量子门量子计算中的读取:量子测量读博做的是量子计算相关方向,现在先... 查看详情

独家消息:阿里云悄然推出rpa云电脑,已与多家rpa厂商开放合作

...产品技术对接。从资料来看,RPA云电脑具备自动登陆注册机器人、一键自动完成任务等特点,能够帮助组织通过流程 查看详情

机器学习经典开源数据集盘点

在机器学习任务实施前,如何快速寻找到可用数据集,是令每一位研究人员最头痛的事情。本文为大家列举了八大主流数据集来源,不仅包含大量的数据集信息,而且包含了描述、用法以及一些实施案例等。01Kaggl... 查看详情

机器学习进化史:从线性模型到神经网络

 【深度】机器学习进化史:从线性模型到神经网络本文作者:天诺2015-05-0516:54导语:RezaZadeh是斯坦福大学工程计算和数学研究所顾问教授,他主要专注于机器学习理论和应用,分布式计算。如果你对人工智能感兴趣,那他讲... 查看详情

阿里技术总监整理的《springboot学习手册》,开放下载!

...阿里,还是小公司都在用SpringBoot,现在分享一份学习资料希望能帮到大家。SpringBoot 系列从⼊⻔到进阶手册:3目录:如果你手中没有一份SpringBoot手册,请保存 查看详情

阿里技术总监整理的《springboot学习手册》,开放下载!

...阿里,还是小公司都在用SpringBoot,现在分享一份学习资料希望能帮到大家。SpringBoot 系列从⼊⻔到进阶手册:3天后不再提供下载方式,请速速保存。目录:如果你手中没有一 查看详情

机器学习常用算法盘点

  在本文中,我将提供两种分类机器学习算法的方法。一是根据学习方式分类,二是根据类似的形式或功能分类。这两种方法都很有用,不过,本文将侧重后者,也就是根据类似的形式或功能分类。在阅读完本文以后,你... 查看详情

轻量化ai服务再添两将!阿里云机器学习paidsw2.0&alink商业版重磅发布(代码片段)

...,降低研发成本而推出的一款适用于各类AI开发者的云端机器学习集成开发环境。DSW2.0是借助阿里云ECS,Docker和Kubernetes等云原生技术,能够在几分钟内帮用户完成环境搭建,相对DSW1.0开放更高的开发权限,满足各个层面客户的使... 查看详情

阿里云周源:一篇文章读懂四代视频加密技术演进

...ideoStackCon峰会上,阿里云高级技术专家周源进行了《视频加密和DRM的实施实践》主题分享。周源,有十多年音视频研发经验,之前在淘宝视频负责开放平台,目前在阿里云视频云部门负责媒体处理,在大规模系统建设和云计算方... 查看详情

阿里云周源:一篇文章读懂四代视频加密技术演进

...ideoStackCon峰会上,阿里云高级技术专家周源进行了《视频加密和DRM的实施实践》主题分享。周源,有十多年音视频研发经验,之前在淘宝视频负责开放平台,目前在阿里云视频云部门负责媒体处理,在大规模系统建设和云计算方... 查看详情

对话李飞飞,揭秘国际体育赛事风“云”背后的黑科技

...众的参与体验,是体育组织越来越重视的问题。那么阿里云技术是如何帮助解决这个问题的呢?今天,我们有幸邀请到阿里巴巴集团副总裁、阿里云智能数据库产品事业部负责人、ACM杰出科学家李飞飞为我们揭秘国际... 查看详情

对话李飞飞,揭秘国际体育赛事风“云”背后的黑科技

...众的参与体验,是体育组织越来越重视的问题。那么阿里云技术是如何帮助解决这个问题的呢?今天,我们有幸邀请到阿里巴巴集团副总裁、阿里云智能数据库产品事业部负责人、ACM杰出科学家李飞飞为我们揭秘国际... 查看详情