自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

Ververica的博客

Apache Flink 官方运营账号

  • 博客(723)
  • 收藏
  • 关注

原创 Flink DataStream API 批处理能力演进之路

本文由阿里云 Flink 团队郭伟杰老师撰写,旨在向 Flink Batch 社区用户介绍 Flink DataStream API 批处理能力的演进之路。

2024-04-29 13:05:43 638

原创 阿里巴巴瓴羊基于 Flink 实时计算的优化和实践

本⽂整理⾃阿里云智能集团技术专家王柳焮⽼师在 Flink Forward Asia 2023 中平台建设专场的分享。

2024-04-26 10:56:06 2707 1

原创 友盟+|如何通过阿里云Flink+Paimon实现流式湖仓落地方案

友盟+ 以“数据智能,驱动业务增长”为使命,为移动应用开发者和企业提供包括统计分析、性能监测、消息推送、智能认证等一站式解决方案。

2024-04-24 09:45:02 854 2

原创 官宣|Apache Paimon 毕业成为顶级项目,数据湖步入实时新篇章!

Apache Paimon 在构建实时数据湖与流批处理技术领域取得了重大突破,数据湖步入实时新篇章!

2024-04-18 14:44:48 860

原创 Flink CDC在阿里云DataWorks数据集成应用实践

阿里云 DataWorks 数据集成发展已经超过 10 年,起步于 2011 年的阿里巴巴内部数据平台事业部同步中心。2014 年正式对外提供云服务功能,2019年完成公共云商业化,发布了独享资源组功能。2020年发布了实时同步,支持整库全增量以及资源连通性自助诊断等功能。2023 年初,基于 Flink CDC 重构后的新版引擎功能正式发布上线,具备流批一体、弹性扩缩容等功能特性。

2024-04-16 10:18:18 637

原创 Flink+Paimon+Hologres 构建实时湖仓数据分析

本文整理自阿里云高级专家喻良,在 Flink Forward Asia 2023 主会场的分享。

2024-04-12 14:24:58 288

原创 Flink 流批一体在模型特征场景的使用

本文整理自B站资深开发工程师张杨老师在 Flink Forward Asia 2023 中 AI 特征工程专场的分享。

2024-04-03 13:05:51 2616

原创 阿里云实时计算Flink的产品化思考与实践【下】

本文整理自阿里云高级产品专家黄鹏程和阿里云技术专家陈婧敏在 FFA 2023 平台建设专场中的分享。

2024-03-29 13:14:52 1224

原创 阿里云实时计算Flink的产品化思考与实践【上】

本文整理自阿里云高级产品专家黄鹏程和阿里云技术专家陈婧敏在 FFA 2023 平台建设专场中的分享。

2024-03-27 14:48:44 1348

原创 官宣|阿里巴巴捐赠的 Flink CDC 项目正式加入 Apache 基金会

本文整理自阿里云开源大数据平台徐榜江 (雪尽),关于阿里巴巴捐赠的 Flink CDC 项目正式加入 Apache 基金会。

2024-03-21 10:33:24 1282

原创 官宣|Apache Flink 1.19 发布公告

Apache Flink PMC(项目管理委员)很高兴地宣布发布 Apache Flink 1.19.0。

2024-03-19 10:48:39 1304

原创 如何高效接入 Flink: Connecter / Catalog API 核心设计与社区进展

本文整理自阿里云实时计算团队 Apache Flink Committer 和 PMC Member 任庆盛在 FFA 2023 核心技术专场(二)中的分享。

2024-03-15 09:50:17 1021

原创 新一代实时数据集成框架 Flink CDC 3.0 —— 核心技术架构解析

本文整理自阿里云开源大数据平台吕宴全关于新一代实时数据集成框架 Flink CDC 3.0 的核心技术架构解析。

2024-03-12 11:04:57 1138

原创 基于 Kyuubi 实现分布式 Flink SQL 网关

本文整理自网易互娱资深开发工程师、Apache Kyuubi Committer 林小铂的《基于 Kyuubi 实现分布式 Flink SQL 网关》分享。

2024-03-05 10:11:13 1304

原创 蚂蚁流场景状态演进和优化

本文整理自蚂蚁集团实时计算组技术专家闵文俊在 FFA 2023 核心技术(一)中 的分享,内容关于蚂蚁流场景状态演进和优化的研究。

2024-02-29 10:53:48 853

原创 Flink ML 的新特性解析与应用

本文整理自阿里巴巴算法专家赵伟波,在 Flink Forward Asia 2023 AI 特征工程专场的分享。

2024-02-22 20:00:45 1218

原创 Flink 在蚂蚁实时特征平台的深度应用

本文整理自蚂蚁集团高级技术专家赵亮星云,在 Flink Forward Asia 2023 AI 特征工程专场的分享。

2024-02-21 10:10:38 1597

原创 Flink 2.0 状态存算分离改造实践

本文整理自阿里云智能 Flink 存储引擎团队兰兆千在 FFA 2023 核心技术(一)中 的分享,内容关于 Flink 2.0 状态存算分离改造实践的研究。

2024-02-07 11:22:29 1860

转载 构建Streaming Lakehouse:使用Paimon和Hudi的性能对比

本文将在阿里云EMR上,针对数据实时入湖场景,对 Paimon 和 Hudi 的性能进行比对,然后分别以 Paimon 和 Hudi 作为统一存储搭建准实时数仓。

2024-02-02 13:34:06 369

原创 使用 Paimon + StarRocks 极速批流一体湖仓分析

本文整理自阿里云智能高级开发工程师王日宇,在 Flink Forward Asia 2023 流式湖仓(二)专场的分享。

2024-01-31 11:07:31 1204

原创 Flink 2.0 状态管理存算分离架构演进

本文整理自阿里云智能 Flink 存储引擎团队负责人梅源在 Flink Forward Asia 2023 的分享,梅源结合阿里内部的实践,分享了状态管理的演进和 Flink 2.0 存算分离架构的选型。

2024-01-26 13:42:27 1390

原创 阿里云 Flink 原理分析与应用:深入探索 MongoDB Schema Inference

本文整理自阿里云 Flink 团队归源老师关于阿里云 Flink 原理分析与应用:深入探索 MongoDB Schema Inference 的研究。

2024-01-25 09:49:34 1402

原创 基于 Flink 的实时数仓在曹操出行运营中的应用

本文整理自曹操出行基础研发部负责人史何富,在 Flink Forward Asia 2023 主会场的分享。本次分享将为大家介绍实时数仓在曹操出行(互联网网约车出行企业)的实时数仓应用场景,以及通过离线场景向实时场景下加速升级而获得的业务价值。

2024-01-19 13:39:09 1256

原创 基于 Hologres+Flink 的曹操出行实时数仓建设

本文整理自曹操出行实时计算负责人林震基于 Hologres+Flink 的曹操出行实时数仓建设的分享

2024-01-18 17:38:19 1530

转载 流式湖仓增强,Hologres + Flink 构建企业级实时数仓

2023 年 12 月,由阿里云主办的实时计算闭门会在北京举行,阿里云实时数仓 Hologres 研发负责人姜伟华现场分享 Hologres+Flink 构建的企业级实时数仓,实现全链路的数据实时计算、实时写入、实时更新、实时查询。

2024-01-12 14:54:15 415

原创 阿里云实时计算企业级状态存储引擎 Gemini 技术解读

本文整理自阿里云 Flink 存储引擎团队李晋忠,兰兆千,梅源关于阿里云实时计算企业级状态存储引擎 Gemini 的研究。

2024-01-10 10:42:58 1456

原创 Apache Paimon:Streaming Lakehouse is Coming

本文整理自阿里云智能开源表存储负责人,Founder of Paimon,Flink PMC 成员李劲松(花名:之信)、同程旅行大数据专家,Apache Hudi & Paimon Contributor吴祥平、汽车之家大数据计算平台负责人邸星星、联通数科大数据高级技术专家,Apache Paimon Contributor王云朋在 Flink Forward Asia 2023...

2024-01-04 20:02:45 1392

转载 Apache Flink 和 Paimon 在自如数据集成场景中的使用

自如目前线上有基于 Hive 的离线数仓和基于 Flink、Kafka 的实时数仓,随着业务发展,我们也在探索引入湖仓一体的架构更好的支持业务,我们对比了 Iceberg、Hudi、Paimon 后,最终选择 Paimon 作为我们湖仓一体的存储引擎,本文分享下自如在引入 Paimon 做数据集成的一些探索实践。01原始接入自如目前使用的业务库入 Hive 的简略逻辑图如下(拿 MySQL...

2024-01-02 20:24:37 515

原创 The Next Generation of Apache Flink

本文整理自阿里云智能 Flink 分布式执行负责人、Apache Flink PMC 成员、Flink 2.0 Release Manager 宋辛童老师在 Flink Forward Asia 2023 主会场的分享。

2023-12-27 20:02:22 720

原创 Next Station of Flink CDC

本文整理自阿里云智能 Flink SQL、Flink CDC 负责人伍翀(花名:云邪),在 Flink Forward Asia 2023 主会场的分享。

2023-12-26 20:01:10 1643

转载 快速实践: 通过 Flink CDC 一键整库同步 MongoDB 到 Paimon

Apache Paimon (incubating) 是一项流式数据湖存储技术,可以为用户提供高吞吐、低延迟的数据摄入、流式订阅以及实时查询能力。

2023-12-25 20:01:11 653

原创 Flink Has Become the De-facto Standard of Streaming Compute

本文整理自 Apache Flink 中文社区发起人、阿里巴巴开源大数据平台负责人王峰(莫问),在 Flink Forward Asia 2023 主会场的分享。

2023-12-22 20:00:18 1348

转载 基于 Flink SQL 和 Paimon 构建流式湖仓新方案

摘要:本文整理自阿里云智能开源表存储负责人,Founder of Paimon,Flink PMC 成员李劲松(花名:之信)在云栖大会开源大数据专场的分享。本篇内容主要分为三部分:1.数据分析架构演进2.介绍 Apache Paimon3. Flink + Paimon 流式湖仓Tips:点击「阅读原文」免费领取 5000CU*小时 Flink 云资源01数据分析架构演...

2023-12-20 20:02:42 720

转载 福利「Flink Forward Asia 2023 」视频合集!

摘要:2023 年 12 月 9 日,Flink Forward Asia 2023 在北京圆满结束。本届大会共有 70+ 演讲议题、30+ 一线大厂技术与实践分享。现所有专场回放视频已经出炉,并在Flink-learning 学训平台上线。Tips:点击「阅读原文」直达 FFA 2023 会后资料合集列表~经过小松鼠的不懈努力,本届 Flink Forward Asia 2023峰会全部专场...

2023-12-19 20:01:58 537

原创 Flink CDC 3.0 正式发布,详细解读新一代实时数据集成框架

01FlinkCDC概述Flink CDC 是基于数据库日志 CDC(Change Data Capture)技术的实时数据集成框架,支持了全增量一体化、无锁读取、并行读取、表结构变更自动同步、分布式架构等高级特性。配合 Flink 优秀的管道能力和丰富的上下游生态,Flink CDC 可以高效实现海量数据的实时集成。Flink CDC 社区发展迅速,在开源的三年时间里,社区已经吸引了 111...

2023-12-18 20:00:59 3874 2

转载 流计算迎来代际变革:流式湖仓 Flink + Paimon 加速落地、Flink CDC 重磅升级

2023 年 12 月 9 日,Flink Forward Asia 2023 (以下简称 FFA )在北京圆满结束。70+ 演讲议题、30+ 一线大厂技术与实践分享,以及座无虚席的现场,无一不昭示着重回线下的 FFA 的行业号召力。借用 Apache Flink 中文社区发起人、Apache Paimon PPMC Member、阿里云智能开源大数据平台负责人王峰的话来说:“经过近十年的发展,F...

2023-12-15 13:00:24 589

转载 福利「Flink Forward Asia 2023 」PPT 阅读合集!

2023 年 12 月 8 日-9 日, Flink Forward Asia(FFA)峰会成功举行。来自阿里云智能、蚂蚁金服、字节跳动、芒果 TV、快手、美团、华为、美的、Shopee、米哈游、腾讯、同程旅行、汽车之家、网易等全球 30+各行业一线厂商的嘉宾,围绕核心技术、行业实践、生产实践、平台建设、流式湖仓、云原生等多个时下热门方向,全方位解析 Apache Flink 核心技术、生态及应用...

2023-12-14 20:00:44 661

原创 Flink Forward Asia 2023 主会场精彩回顾

2023 年 12 月 8 日-9 日,Flink Forward Asia(FFA)峰会成功举行。Flink Forward Asia 是由 Apache 软件基金会官方授权、由阿里云承办的技术峰会。主会场精彩回顾阿里云副总裁、阿里云计算平台事业部负责人汪军华在开场致辞中表示,阿里云与开源伙伴将持续合作,赋予开发者更灵活的选择权,将技术沉淀持续返哺开源社区,云和开源共同形成数字世界的可信基础。...

2023-12-09 20:00:29 557

转载 「FFA 动手实践」Flink+Hologres 搭建实时数仓

资深 Flink 专家授课,手把手带领开发者实操。以国内某电商平台为例,基于 Flink+Hologres 架构搭建实时数仓,实现数据的实时加工清洗和对接上层应用数据查询,形成实时数据的分层和复用,支撑业务方的报表查询及个性化推荐等多个业务场景。■报名方式:名额 100 名,开发者需携带电脑参加。购买 FFA 门票并勾选训练营选项,购票地址:https://www.huodongxing.com...

2023-12-05 20:04:57 416

转载 FFA赠票活动|《Flink开发者问卷调研2023》正式启动

Flink 开发者问卷调研 2023我们诚挚邀请 Flink 开发者参与调研,希望通过本次调研,更深入的了解 Flink 开发者的应用实践现状,并为 Flink 社区的技术发展提供有益参考。为感谢您的支持,我们将赠送您价值 199 元的 FFA 门票一张,限量 100 张,先到先得。我们将通过问卷中填写的手机号,发送 FFA 电子票给获得赠票的开发者。如果获得赠票的开发者,在本活动之前已自行购买 ...

2023-11-30 20:00:56 357

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除