浅谈传统企业的大数据平台如何上云

明哥的IT随笔 明哥的IT随笔     2023-01-22     724

关键词:

大家好,我是明哥!

今天我们来看下,传统企业的大数据平台如何上云,一点感悟,欢迎大家交流。

1. 趋势介绍与阐述:大数据和云计算进一步深度融合, 拥抱云计算走向云原生化

首先我们来解读下“大数据和云计算进一步深度融合, 拥抱云计算走向云原生化”:

  • 云原生(Cloud Native)理念,本质上是一套“利用云计算技术为用户降本增效”的最佳实践与方法论;

  • 大数据拥抱云计算走向云原生化,其驱动力来自于以下四个方面:

    • 一是各个具体的大数据组件都在主动改变自身架构,积极“云化”以适应云部署环境(在底层技术架构上,为适应云部署环境,大数据更加青睐存储计算分离的架构,在存储层也融合了文件系统和对象存储且更加青睐云友好的对象存储);

    • 二是各个传统大数据供应商已经转向依托云来提供自己的产品和服务;

    • 三是各个云计算厂商在不断推出各种云上托管的基于大数据的服务,以加强自己的市场竞争力;

    • 四是应用方的大数据平台很多也有主动上云的需求;

  • 各个行业和各家公司的发展阶段不同,融合本地数据中心和云环境的进度也不同,但在部署架构上,基于混合云和多云模式,融合公有云私有云与非云模式,来构建企业整体的IT基础设施,必将是大势所趋。

2 大数据跟云计算的融合现状和趋势

大数据跟云计算的融合现状和趋势如下:

  • 很多云计算头部厂商,比如AWS、阿里和华为等,都提供了云上托管的Hadoop和NoSQL数据库等大数据解决方案; 很多传统的大数据供应商,如 elastic, cloudera, databricks,confluent等,也在公有云上推出了自己的大数据解决方案;

  • 很多初创企业和中小企业选择了公有云上托管的大数据解决方案,来搭建和部署自己的应用系统,以快速面向市场推出产品提供服务;

  • 也有很多规模较大的公司,出于云端的数据安全和隐私保护,出于大规模租用公有云的成本考量,出于多个业务系统之间数据跨区域移动的成本等考量,没有使用公有云,而是自行搭建私有云;

  • 从长远整体上看,大数据云计算是越来越深度融合的,大数据朝着深度挖掘用户价值、注重数据时效性、强调边缘计算、非结构化协同处理等方向发展,对云计算底座的要求也越来越高。

3 机构大数据平台建设建议

  1. 企业需要意识到,业务系统的上云不是一蹴而就的,也不是单向的一帆风顺的:

  • 这里涉及到新开发的业务系统的主动上云(由于是采用云原生技术栈新开发的业务系统,其上云相对顺畅些);

  • 也包括历史遗留系统的迁移上云(单个遗留系统的改造迁移和上云,视乎复杂程度,往往需要一年多甚至更长的时间周期);

  • 有时也会有从云端部署回退到私有云或数据中心的情形(上云后系统不顺畅,IT人员不适应等,也有会退的场景)。

  1. 企业业务系统上云的最终目标,出于各种考量(有业务系统高可用的考量,也有不被云厂商绑定即 vendor-lockin的考量,也有生态系统合作伙伴即经济因素等多种考量),部署架构不会是单一的某个公有云,而是多个公有云和私有云的混合部署形态;

  2. 所以企业需要制定从上到下的整体的云化整合方案,梳理所有的业务系统,根据其业务关键性的不同,数据时效要求的不同,以及安全与隐私考量的不同等多种因素,分阶段有步骤地,迁移部分业务系统到公有云或私有云上,基于混合云和多云模式,融合公有云私有云与非云模式,来构建企业整体的IT基础设施。

!关注不迷路~ 各种福利、资源定期分享!欢迎小伙伴们关注公众号!

!欢迎小伙伴们添加明哥微信,备注“加群交流”,拉你加入ABC技术交流群!

IT明哥

如何构建一个企业的大数据分析平台

 面对海量的各种来源的数据,如何对这些零散的数据进行有效的分析,得到有价值的信息一直是大数据领域研究的热点问题。大数据分析处理平台就是整合当前主流的各种具有不同侧重点的大数据处理分析框架和工具,实现... 查看详情

数据平台上云,变革远比想象的深刻

...得转载。“戒备”与“偏见”几年前,我所在的一家传统行业的头部企业启动了一系列数字化转型项目,在配套的IT基础设施建设上,“上云”已 查看详情

数字基础设施已成新趋势:云原生数据库如何解决中小企业上云关键问题

Oracle等传统数据库架构无法满足企业面临的业务挑战,电信、金融和政务等客户正在核心系统领域加速上云。基于这样的背景,6月9日,2020阿里云峰会,阿里巴巴副总裁、阿里云数据库负责人李飞飞提出,“今年要完成10000套传... 查看详情

全民上云时代如何选择云服务最划算?

...地位的中小企业/个人开发者才是使用云服务的主力军。传统IT模式制约中小企业发展,上云已成常态以往传统IT架构下,业务上线前,企业需要通过预估业务量来配置资源,然而这种预估严重依赖经验,前期采购成本过高或上线... 查看详情

《2022中小企业快成长之年,上云选对平台是关键,这次我站华为云》(代码片段)

...担忧,让中小企业走在了数字化转型的后面。相对于传统服务器,云服务器因为不需要去拉 查看详情

浅谈传统企业网络运营那些事儿

  网络的变革、更新推动的速度很快,小到出门购物全方位在原基础的微信/支付宝等第三方支付等,随着微信公众号/微信小程序等"轻"级传播推广渠道的发展,以及客观的传统企业在互联网的冲击下,同样的价格比服务?比... 查看详情

面对云计算,传统it从业者如何选择

...企业上云已经成为未来的发展趋势。毫无疑问,对于那些传统IT技术——企业架构师、系统管理者、网络工程师等人员跻身到云计算行业不仅是大势所趋,也能为其带来工作的保证,薪酬也更加丰厚。然而,通往云计算职业之路... 查看详情

2022年中小企业上云首选,华为云省钱攻略

目录1、中小企业上云有啥好处?2、选择哪家平台?3、如何省钱?1、中小企业上云有啥好处?2022年不仅是农历虎年,更是中小企业快成长之年。如何助力企业快速成长?企业上云就是不二选择。企业上云... 查看详情

浅谈“互联网+”浪潮下传统行业的战略转型

“互联网+”时代来临,越来越多的互联网企业入侵传统行业,越来越多的传统企业面临战略转型。对于互联网企业来说,快速的产品推广和灵活的用户运营是他们的优势,但是在线下门店,服务和产品质量上存在先天不足,并... 查看详情

如何「场景化」的企业上云

...是云环境之间的简单连接,其能力和价值并没有超出传统公、私有云的范畴。然而近几年,无论是在国内还是国外,混合云都迎来了长足的发展&#x 查看详情

传统企业选择zstack上云的动力

随着互联网技术的发展,云计算的部署和应用越来越广泛。云计算可以让企业高效地运营业务,因此非常受欢迎。据不完全统计,手机中90%以上的移动流量都来源于云应用。打开手机,各种订餐APP、打车APP、订票A... 查看详情

传统企业选择zstack上云的动力

随着互联网技术的发展,云计算的部署和应用越来越广泛。云计算可以让企业高效地运营业务,因此非常受欢迎。据不完全统计,手机中90%以上的移动流量都来源于云应用。打开手机,各种订餐APP、打车APP、订票A... 查看详情

数据不再遥远——如何构建企业级的数据分析平台

前言:马总说过这是一个DT的时代,一个从IT到DT转变的时代。确实这几年到处都能听到诸如“云计算”、“大数据”、“上云”的谈论,确实随着云计算的兴起,依托于相对低成本、高稳定性的云设施构建平台的成本越来越低,... 查看详情

想提高办公效率上云计算是最好的选择(代码片段)

...计算服务支出将增长3倍,云计算行业整体增长率将达到传统IT行业的6倍。云计算数据存储能力的提及也为应用领域带来了成熟的发展。在国内,云存储最初受到欢迎,更易于理解的名称为“网络磁盘”。根据云容科技统计目前... 查看详情

本地到云端数据如何处理

...的重点!问题是,什么是存储和使用数据的新方法?与传统本地模式相比,最新的数据存储方式有哪些不同?把数据从传统的数据仓库 查看详情

云网融合—基于sd-dca的云接入网络融合

...业务对网络的速率、时延和可靠性提出了更高的要求,但传统上云专线还是那根粗管道,无法区分不同的业务,无法对重要业务提供高品质的体验保障;数据都在网上、云上,安全风险也增加了。对于政企大客户而言,更倾向于... 查看详情

企业数据上云必有一战,华为云12.12云数据库2折起

...22年。进入2020年底,我们将迎来数据库行业的世纪之战,企业数据上云与治理面临着重大抉择:本地数据库与云数据库的PK。特别是受2020全球疫情的影响,越来越多的企业正加速数字化转型,云数据库以及云上数据治理的时代将... 查看详情

蚂蚁集团sofastack:新一代分布式云paas平台,打造企业上云新体验

...如何上云?**面对大量异构基础设施带来的挑战,企业如何最大化上云价值 查看详情