关键词：
简介：点击链接，动动手指获取白皮书～另外，实时数仓 Meetup 议题征集中！
GitHub 地址
https://github.com/apache/flink
欢迎大家给 Flink 点赞送 star~
7 月 24 日，Apache Flink 社区与 PingCAP 在 DevCon 2021 技术峰会上联合发布了「基于 TiDB 与 Flink 的实时数仓最佳实践白皮书」，为企业用户构建实时数仓，应对实时洞察挑战提供最佳实践指南。
「基于 TiDB 与 Flink 的实时数仓最佳实践白皮书」下载
https://flink-learning.org.cn/
随着数字化进程的加速，越来越多的企业正面临前所未有的数据规模挑战；日趋加剧的商业竞争，也使得外部用户和公司内部决策者都无法依赖传统时效性不佳的离线数据分析；海量，实时，在线的数字化新常态需要更实时的数据分析，甚至是对正在发生的交易数据进行分析，以支撑更加敏捷的商业决策。
Apache Flink PMC & 阿里巴巴资深技术专家杨克特受邀出席，并在白皮书发布仪式上表示，Apache Flink 是一个面向分布式数据流处理和批量数据处理的开源计算平台，可以支持低延迟、高吞吐、高性能的流处理，广泛应用于高实时性场景下的实时计算。
PingCAP 社区事业部总经理姚维表示，TiDB 是一款领先的具备完整 HTAP 能力的企业级分布式数据库，可以在一份数据源上同时支撑在线事务处理 (OLTP) 和在线分析处理 (OLAP) 场景，不但能良好地支持实时数据落地存储，也可以提供一体化的分析能力。
借助 Flink 出色的流批一体技术，TiDB 与 Flink 一起探索为用户构建一个实时数仓最佳实践方案，满足了用户实时洞察实时决策的分析需求。本次发布的 「TiDB & Flink 实时数仓最佳实践白皮书」，融合了双方的技术优势，可以为用户提供一栈式实时数据仓库最佳实践，支持企业进行实时数据分析，助力敏捷的商业决策。
开源是当前全球化背景下基础软件领域成功的最佳路径。Flink 连续 3 年蝉联全球最活跃的 Apache 开源项目，拥有超过 20W 开发者关注。不仅如此，Flink GitHub 的星数和 Flink 的社区代码贡献者数量，在过去数年中一直保持年均 30%+ 的增长。
未来，无论是 Apache Flink 社区还是 PingCAP，都将继续与更多开源技术社区探索技术合作，构建有生命力的开放生态体系。
「基于 TiDB 与 Flink 的实时数仓最佳实践白皮书」下载
https://flink-learning.org.cn/
实时数仓 Meetup 议题征集：
8 月 29 日左右 (时间暂定)，Flink 社区计划举办 Meetup 实时数仓专场，现征集议题中！
关于实时数仓，大家的关注度一直很高，目前业界也有许多落地的公司。在 Meetup 实时数仓专场， 我们将更加注重 “交流”，希望将大家聚集在一起相互探讨关于实时数仓的话题，重点在踩过的坑、碰到的痛点都是怎样解决的～
现征集实时数仓 Meetup 的议题，围绕 “实时数仓踩坑痛点和避坑经验”，欢迎各位老师和同学带上贵公司的介绍，以及议题的初步大纲来找小松鼠。
公司不议大小，经验才论足缺。我们会选取其中最具代表性的议题，邀请您参加实时数仓 Meetup 专场～ 你们的经验对于其他技术开发者和 Flink 社区都很重要！
原文链接：https://developer.aliyun.com/article/786479?
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
基于flink构建实时数仓实践
...会员、游戏等非常多的业务板块。与此同时产品及运营对实时数据需求逐渐增多，帮助他们更快的做出决策，更好的进行产品迭代，实时数仓的建设变得越发重要起来。本文主要介绍用户增长业务基于Flink构建实时数... 查看详情
快手基于flink构建实时数仓场景化实践
简介： 一文了解快手基于Flink构建的实时数仓架构，以及一些难题的解决方案。本文整理自快手数据技术专家李天朔在5月22日北京站FlinkMeetup分享的议题《快手基于Flink构建实时数仓场景化实践》，内容包括：快... 查看详情
flink在伴鱼的实践：如何保障数据的准确性(代码片段)
...#xff0c;离线数据日渐无法满足运营同学的需求，数据的实时性要求越来越高。之前的实时任务是通过实时同步至TiDB的数据，利用TiDB进行微批计算。随着越来越多的实时场景涌现出来，TiDB已经无法满足实时数据计算场... 查看详情
实时数仓系列-网易云音乐基于flink+kafka的实时数仓建设实践
简介：本文由网易云音乐实时计算平台研发工程师岳猛分享，主要从以下四个部分将为大家介绍Flink+Kafka在网易云音乐的应用实战：背景Flink+Kafka平台化设计Kafka在实时数仓中的应用问题&改进直播回放：https://developer.aliyun.com/li... 查看详情
快手基于flink构建实时数仓场景化实践
...在5月22日北京站FlinkMeetup分享的议题《快手基于Flink构建实时数仓场景化实践》，内容包括：快手实时计算场景快手实时数仓架构及保障措施快手场景问题及解决方案未来规划1.快手实时计算场景快手业务中的实时计算场... 查看详情
flink最佳实践之通过ticdc将tidb数据流入flink
背景介绍本文将介绍如何将TiDB中的数据，通过TiCDC导入到Kafka中，继而被Flink消费的案例。为了能够快速的验证整套流程的功能性，所有的组件都以单机的形式部署。如果需要在生产环境中部署，建议将每一个组件... 查看详情
快手基于flink构建实时数仓场景化实践
...和应用，分享日期：2021年5月22日。内容包括:快手实时计算场景快手实时数仓架构及保障措施快手场景问题及解决方案未来规划Tips：点击文末「阅读原文」即可回顾作者原版分享视频～1.快手实时计算场景主要是... 查看详情
实时数仓入门训练营：实时计算flink版sql实践
简介： 《实时数仓入门训练营》由阿里云研究员王峰、阿里云资深技术专家金晓军、阿里云高级产品专家刘一鸣等实时计算Flink版和Hologres的多名技术/产品一线专家齐上阵，合力搭建此次训练营的课程体系，精心打... 查看详情
实时数仓入门训练营：实时计算flink版sql实践
简介：《实时数仓入门训练营》由阿里云研究员王峰、阿里云高级产品专家刘一鸣等实时计算Flink版和Hologres的多名技术/产品一线专家齐上阵，合力搭建此次训练营的课程体系，精心打磨课程内容，直击当下同学... 查看详情
淘菜菜：基于flink和hologres的实时数仓架构升级之路
...升级，从传统多组件的架构升级为现在稳定的高可用实时数仓2.0，承载上千万RPS写入、几百T数据存储和秒级查询响应。在此合作过程中，淘菜菜技术团队不断沉淀出实时数仓场景下的最佳实践、开发实践、开发规范... 查看详情
flink美团flink大作业部署与状态稳定性优化实践
...;应用比较多的是数据管道场景，比如数仓ODS层数据的实时接入，或跨数据源的实时数据同步；比较典型的应用场景是数据分析，比如实时数仓的建设和应用，业务会出一些实时报表和大盘辅助 查看详情
flink在顺丰的应用实践
简介： 顺丰基于Flink建设实时数仓的思路，引入HudiOnFlink加速数仓宽表，以及实时数仓平台化建设的实践。本⽂由社区志愿者苗文婷整理，内容源⾃顺丰科技大数据平台研发工程师龙逸尘在FlinkForwardAsia2020分享的... 查看详情
低代码实时数仓构建系统的设计与实践
1导读本文介绍58信安基于Flink实现低代码实时数仓构建系统，我们将数仓构建这一过程进行抽象，通过工程化的思想去解决，将固有领域问题交给系统，让开发人员关注数据本身，解放人力缩短数仓构建周期。... 查看详情
快手基于flink构建实时数仓场景化实践
一、快手实时计算场景快手业务中的实时计算场景主要分为四块：公司级别的核心数据：包括公司经营大盘，实时核心日报，以及移动版数据。相当于团队会有公司的大盘指标，以及各个业务线，比如视频... 查看详情
hudi+flink实时数仓在顺丰的实践(代码片段)
...2019年引入Hudi,当时是基于Spark批处理，2020年对数据的实时性要求更高公司对架构进行了升级，在 查看详情
flink最佳实践之使用canal同步mysql数据至tidb
背景介绍本文将介绍如何将MySQL中的数据，通过Binlog+Canal的形式导入到Kafka中，继而被Flink消费的案例。为了能够快速的验证整套流程的功能性，所有的组件都以单机的形式部署。如果手上的物理资源不足，可以... 查看详情
基于flink+iceberg的全场景实时数仓建设实践
ApacheFlink是目前大数据领域非常流行的流批统一的计算引擎，数据湖是顺应云时代发展潮流的新型技术架构，以Iceberg、Hudi、Delta为代表的解决方案应运而生，Iceberg目前支持Flink通过DataStreamAPI/TableAPI将数据写入Iceberg的... 查看详情
bigo使用flink做olap分析及实时数仓的实践和优化(代码片段)
cnt1,cnt2cntxtable_auid更多Flink相关技术问题，可扫码加入社区钉钉交流群～ 戳我，查看原文视频&演讲PDF～ 查看详情