当前位置: 首页 > 知识库问答 >
问题:

Apache beam中带有数据流运行器的聚合器

邵献
2023-03-14

你能让我知道如何在新的api中使用与数据流运行器的聚合器吗。?

暂时还没有答案

 类似资料:
  • 问题内容: 我正在尝试对某些条件过滤后的值进行汇总。我正在使用spring数据的ElasticSearchTemplate.query()方法也执行查询并在结果提取器中获取结果。我正确地找到了匹配(即应用了过滤器,并且仅检索了与这些值匹配的文档。)。但是,汇总是在所有文档上执行的。我认为汇总应仅应用于过滤后的值。以下是我正在使用的代码: 为了进一步调试问题,我编写了代码来执行查询,而不是使用spr

  • 我一直在尝试在聚集中添加超时,以避免等待每个流都完成。但是当我添加超时时,它不起作用,因为聚合器等待每个流完成。 E、 在我的流中,其中一个有2秒的延迟,另一个有4秒的延迟 我使用遗嘱执行人。newCachedThreadPool()以并行运行。我想释放包含的每条消息,直到超时完成 我一直在测试的另一种方法是使用默认的gatherer,并在scatterGather中设置GathereTimeou

  • 问题内容: 假设我有一个抛出运行时异常的方法。我正在使用a 来对列表中的项目调用此方法。 现在,我希望处理列表中的所有项目,并将单个项目上的所有运行时异常收集到“聚合”运行时异常中,该异常将在最后抛出。 在我的真实代码中,我正在进行第三方API调用,这可能会引发运行时异常。我想确保所有项目都已处理,并在最后报告所有错误。 我可以想到几种破解方法,例如捕获并返回异常的函数( ..shudder ..

  • 假设我有一个抛出运行时异常的方法。我正在使用对列表中的项调用此方法。 现在我希望列表中的所有项目都被处理,并且单个项目上的任何运行时异常都被收集到一个“聚合”运行时异常中,该异常将在最后抛出。 在我的真实代码中,我正在进行第三方API调用,这可能会引发运行时异常。我想确保所有项目都得到处理,并且在最后报告任何错误。 我可以想出一些方法来解决这个问题,比如一个函数,它捕获并返回异常(... shud

  • 我正在使用查询DSL的Spring数据JPA,并试图在条件中使用求和函数,因为我正在使用分页,所以我必须首先获得计数。所以我有如下的Java代码:- 它创建这样的查询:- 我得到。 上述查询在中也不起作用,因为sum函数不能与count-in-where条件一起使用。当我必须先进行计数,然后再获取真实数据时,我不知道如何处理这样的问题。有人能帮我解决这个问题的方法吗。 请不要建议注释,因为我不能使

  • 我试图在Apache Beam中使用BigtableIO的运行时参数来写入BigTable。 我创建了一个从 BigQuery 读取并写入 Bigtable 的管道。当我提供静态参数时,管道工作正常(使用 ConfigBigtableIO 和 ConfigBigtableConfiguration,请参阅此处的示例 - https://github.com/GoogleCloudPlatform/