当前位置: 首页 > 知识库问答 >
问题:

使用Apache Beam 2.9.0 Java SDK的Google dataflow作业

谭建章
2023-03-14

我使用的是Beam Java SDK2.9.0,我的工作读自Kafka中的步骤。我的工作在直跑方面很好。当我在Dataflow上部署它时,工作被卡住了,我看不到任何进展。数据流监视UI显示

Output collections
EventKafkaReadTransform/Values/Values/Map.out0
Elements added  
–
Estimated size  
–

共有1个答案

姬捷
2023-03-14

我们也有类似的情况,并发现是无法启动工人(对我们来说是由于slf4j问题,但可能是任何情况)。

如果查看Stackdriver日志(在UI中查看日志,并单击链接转到Stackdriver),您应该能够查看worker_startup日志。

 类似资料:
  • Scopes - 作用域,表示一个限制范围,它最终会生成SQL查询中的where子句。它在模型定义方法sequelize.define的option参数,或通过Model.scope()方法指定。 定义 使用 合并 关联 1. 定义 作用域允许你定义常用的查询,这样就可以很容易地在之后使用。Scopes包括所有相同属性规律的筛选器,where、where、limit等。 Scopes在定义模型时定

  • Eclipse 3.0作业API是否使用任何内部线程池来执行作业?还是每次计划作业(即将启动)时都会创建一个新线程? 如果它不使用任何线程池,是否可以通过某种方式将作业与Java的ExecutorService一起使用,以便调度的作业将重用执行器池中的现有线程? 如果不是,那么最后一个问题是,是否有机会在Eclipse进度视图中提供进度反馈(就像我在Jobs IProgressMonitor中所做

  •  ClickableMap、按照字面意思上说,就是可以「点」的「地图」、通过在一张图片上定义数个「领域」、使玩家可以通过在图片上进行鼠标点击和选择的东西。  吉里吉里/KAG中制作地图,除了需要地图画面本身以外,还需要「领域图片(领域画像)」和「领域动作定义档」这两样,以上三个文件构成完整的地图。 领域图片又是什么?  领域图片是一张和地图画面同样大小,位元数设定成256色的图片。256色以上位元

  • Spring使用Quartz的顺序作业计划 我有三个或更多的工作,这取决于他们各自以前的工作,他们将按顺序运行。如果完成运行,当完成运行。如果在上一个中发生任何错误,则不会激发下一个触发的作业。我试图了解工作链使用石英,但无法通过它。 作业顺序如下所示 提前谢了。

  • 我想从文本文件中读取、解析和写入数据。我实现了这一点,但我有一个关于标识符声明的问题。我在下面展示了我的类。 客户数据apper.java 顾客JAVA 文件管理器。xml 我想问这个问题,我可以在FieldSetMapper中使用下面的类吗?如果我在定义标识符时不使用Camelcase符号,那么写入数据库就不起作用了。有什么方法或方法吗?非常感谢。 顾客JAVA

  • 我试图运行火花作业,基本上加载数据在卡桑德拉表。但它也产生了以下错误。

  • 问题内容: 我把毛巾扔了。我不明白,这有多困难? 我有两个实体和具有多对多的关系。管理关系。所以我有: 然后为我创建实体,如下所示: 然后,在我的后备bean(实际上是一个)中,我以相同的名称存储对检索到的引用作为属性。 然后我在我的JSF中皇家使用了那个支持bean 对于那些对表感兴趣的人: 注意到的第一件事是组似乎是空的,不是空的,而是空的(已通过调试等验证)。因此,我知道默认情况下a 将使用

  • 我们知道,JavaScript中是没有块级作用域的。也就是说,在块语句中定义的变量,实际上是在外部函数中而非在语句中创建的。如下: function outNumber (count) { for (var i = 0; i < count; i ++) { alert(i); } alert(i); } outNumber(5); //5 以上代码会弹出