标签:Flink

Flink 1.16最佳实践:我总结了这些经验

Flink 1.16最佳实践:我总结了这些经验

标题提到的Flink 1.16在本文写作时(2022年7月)尚未正式发布(实际于2022年10月发布)。本文基于Flink 1.15的使用经验,结合1.16的新特性预期,总结Flink生产环境的最佳实践。包括环境搭建、作业开发、性能优化、稳定性保障、监控告警、问题排查等方面的经验。

Flink 1.16原理剖析:深入理解底层机制

Flink 1.16原理剖析:深入理解底层机制

标题提到的Flink 1.16在本文写作时(2022年6月)尚未正式发布(预计2022年10月发布)。本文基于Flink 1.14/1.15的使用经验,结合1.16版本的预期特性,深入剖析Flink的底层原理,包括流处理模型、状态管理、检查点机制、容错机制、内存管理、调度机制等。帮你从底层理解Flink,而不只是会写S…

Flink 1.16踩坑记:那些让我熬夜的问题

Flink 1.16踩坑记:那些让我熬夜的问题

标题提到的Flink 1.16在本文写作时尚未正式发布(预计2022年下半年发布),本文基于Flink 1.14/1.15的使用经验,以及1.16预览版的测试体验,总结Flink使用中常见的坑和解决方法。包括Checkpoint、反压、状态管理、内存配置、序列化、SQL等方面的问题,帮你少走弯路。

Flink CDC迁移实战:从旧系统到新系统

Flink CDC迁移实战:从旧系统到新系统

Flink CDC是这两年很火的数据同步工具,能实时捕获数据库变更,同步到数据湖或数仓。我们团队最近做了一个旧系统到新系统的迁移项目,用Flink CDC做数据实时同步,踩了很多坑。本文分享这次迁移的实战经验,包括架构设计、Flink CDC的配置和调优、遇到的问题和解决方案,以及迁移过程中的注意事项。

Flink CDC面试题:我被问到的那些问题

Flink CDC面试题:我被问到的那些问题

最近面试了几家公司,被问到了很多Flink CDC相关的问题。本文整理了我被问到的高频面试题,以及我的回答思路,包括Flink CDC的原理、架构、使用场景、常见问题、性能优化等。如果你在准备大数据相关的面试,或者想深入了解Flink CDC,希望这篇文章能帮到你。

Flink实时计算进阶:这些技巧你可能不知道

Flink实时计算进阶:这些技巧你可能不知道

用Flink做实时计算有一段时间了,从最开始的入门到现在的深入,踩了不少坑,也积累了一些经验。本文分享Flink实时计算的进阶技巧,包括状态管理、窗口优化、Watermark调优、背压处理、性能调优等方面的经验。这些技巧可能不是入门教程里会讲的,但在实际项目中非常有用。如果你也在用Flink,希望这篇文章能帮你提升实时…

Flink实时计算学习路线:我是怎么入门的

Flink实时计算学习路线:我是怎么入门的

Flink是目前最火的实时计算框架,但很多人不知道怎么入门。本文分享我学习Flink的完整路线,从基础知识到核心概念,从环境搭建到实战项目,从常见坑到学习资源,一步步带你入门Flink实时计算。希望对想学习Flink的朋友有帮助。

Flink实时计算迁移实战:从旧系统到新系统

Flink实时计算迁移实战:从旧系统到新系统

最近负责了公司实时计算平台的迁移项目,把原来基于Storm的旧实时计算系统迁移到Apache Flink上,整个过程踩了很多坑,也积累了不少经验。今天来分享一下这次迁移的实战过程,包括背景、方案、步骤、踩过的坑以及最终的效果,希望能给做类似迁移的朋友一些参考。

Flink实时计算性能优化实战:从慢到快

Flink实时计算性能优化实战:从慢到快

最近做了一个Flink实时计算项目,一开始性能很差,延迟很高,经常背压。经过一轮深入的性能优化,把吞吐量提升了5倍,延迟降到了毫秒级。记录一下整个优化过程,从资源配置到代码优化,从状态管理到checkpoint,一次说清楚。

加载中...
— 已经到底啦 —