问答 2021-12-06 来自:开发者社区

flink和zookeeper都是在K8s的容器中,job启动出现了如下问题怎么解决?

我按着官方文档配置了flink的高可用(flink-conf.yaml)如下: high-availability:zookeeper high-availability.zookeeper.quorum:master:2181 ,slave1:2181,slave2:2181 high-availability.zookeeper.path.root:/flink high-availabil....

问答 2021-12-06 来自:开发者社区

flink on yarn容器异常退出

如题,求解决*来自志愿者整理的flink

问答 2021-12-06 来自:开发者社区

Re:flink 1.9.2 容器ha部署是jobid 一直是000000000000000000

这个问题我也遇到了,请问后来怎么解决的呢? 更换成flink1.11.2都不行!*来自志愿者整理的flink邮件归档

文章 2021-06-22 来自:开发者社区

唯品会:在 Flink 容器化与平台化上的建设实践

转自dbaplus社群公众号作者:王康,唯品会数据平台高级开发工程师GitHub 地址 https://github.com/apache/flink欢迎大家给 Flink 点赞送 star~自 2017 年起,为保障内部业务在平时和大促期间的平稳运行,唯品会就开始基于 Kubernetes 深入打造高性能、稳定、可靠、易用的实时计算平台,现在的平台支持 Flink、Spark、Storm 等主....

唯品会:在 Flink 容器化与平台化上的建设实践
文章 2021-01-06 来自:开发者社区

详解 Flink 容器化环境下的 OOM Killed

作者:林小铂 在生产环境中,Flink 通常会部署在 YARN 或 k8s 等资源管理系统之上,进程会以容器化(YARN 容器或 docker 等容器)的方式运行,其资源会受到资源管理系统的严格限制。另一方面,Flink 运行在 JVM 之上,而 JVM 与容器化环境并不是特别适配,尤其 JVM 复杂且可控性较弱的内存模型,容易导致进程因使用资源超标而被 kill 掉,造成 Flink 应用的不....

详解 Flink 容器化环境下的 OOM Killed
问答 2018-12-10 来自:开发者社区

Flink 1.5.4没有在Kubernetes中注册Google云端存储(GCS)文件系统,尽管它在docker容器中有效

我试图启动一个flink-jobmanager坚持其在GCS状态,所以我加了high-availability.storageDir: gs://BUCKET/ha一行到我flink-conf.yaml和我建立我的Dockerfile描述这里 这是我的Dockerfile: FROM flink:1.5-hadoop28 ADD https://storage.googleapis.com/ha....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注