深入了解 Flink 网络栈(二):监控、指标和处理背压

  • 时间:
  • 浏览:0
  • 来源:大发欢乐生肖APP下载_大发欢乐生肖APP官网

网络监控工作中最重要的环节导致 已经 监控背压了,所谓背压是指系统接收数据的传输波特率高于其处理传输波特率 [1]。这俩 现象将给发送者带来压力,而导致 它的导致 导致 有这俩 清况 :

Apache Flink 的迁移之路,2 年处理效果提升 5 倍

下拉加载更多

带你读《Flink原理、实战与性能优化》之一:Apache Flink介绍

[译] 所有了你必须知道的关于删改理解 Node.js 事件循环及其度量

Apache Flink 的迁移之路,2 年处理效果提升 5 倍

日处理数据量超10亿:友信金服基于Flink构建实时用户画像系统的实践

Apache Flink 在同程艺龙实时计算平台的研发与应用实践

Yahoo的流计算引擎基准测试

何如分析及处理 Flink 反压?

这导致 导致 接收器这俩 就遇到了背压,什么都无法以与发送方相同的传输波特率继续处理数据

每秒几十亿实时处理,阿里巴巴超大规模 Flink 集群运维揭秘

Flink和Prometheus:流式应用进程的云原生监控

在已经 的文章中,朋友 从高级抽象到底层细节各个层面全面介绍了 Flink 网络栈的工作机制。作为这俩 系列的第二篇文章,本文将在第一篇的基础上更进一步,主要探讨何如监视与网络相关的指标,从而识别背压等因素带来的影响,或找出吞吐量和延迟的瓶颈所在。本文将简要介绍处理背压的手段,而已经 的文章将进一步研究网络栈微调的话题。导致 你都有不太熟悉网络栈的知识,强烈建议先阅读本系列的第一篇文章 《原理解析 | 深入了解 Apache Flink 的网络协议栈》。

本文为云栖社区原创内容,未经允许不得转载,如需转载请发送邮件至yqeditor@list.alibaba-inc.com;导致 您发现本社区含有涉嫌抄袭的内容,欢迎发送邮件至:yqgroup@service.aliyun.com 进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。

作者 | Nico Krube

译者 | 王强

资源消耗降低2/3,Flink在唯品会实时平台的应用

Flink 原理与实现:何如处理反压现象

Elasticsearch大咖说|携程旅行:从日志分析平台到综合性 Elasticsearch 管理平台

原理解析 | 深入了解 Apache Flink 的网络协议栈

Yahoo的流计算引擎基准测试

Structured Streaming VS Flink