当前位置: 首页 > 知识库问答 >
问题:

用于在服务器上运行数据流作业的jar路径

东门清夷
2023-03-14

首先,我不熟悉气流。我试图做的是使用气流运行数据流作业。搜索了很多链接,发现我们需要创建一个jar文件,然后使用脚本运行它。有人知道这个罐子应该放在哪里吗,意思是放在谷歌云存储桶上还是本地路径上。我们可以通过气流直接运行模板吗

共有1个答案

穆单鹗
2023-03-14

有一个谷歌云数据流运营商为气流项目做出了贡献,你可以在这里找到。

代码中有一个关于如何指定数据流作业的示例;jar的路径在这里定义(参见代码中的第50行)。您将需要为它提供您正在调度的机器上的jar的路径(因此是您的机器上的本地路径)。

 类似资料:
  • 我有两个作业运行在两个不同的Jenkins服务器机器。 工作A= 工作B= 作业B连续365天每15分钟运行一次。现在,当作业A运行时,作业B失败,因为作业A是代码部署。因此,理想情况下,我的作业B应该在作业A运行期间保持,而不是运行。 有人可以帮助任何插件,可以帮助实现这一点或任何脚本以及如何配置它。 简单地说,这两个作业不应该同时运行

  • 问题内容: 对于具有Java背景的开发人员,我也有兴趣探索使用ASP.NET工具/平台进行软件开发。 Java Web应用程序(.jsp和servlet)可以在许多服务器平台上运行。 问题 :.NET Web应用程序能否在基于Linux的服务器上运行?考虑到无法使用Windows服务器托管Web应用程序的情况。 问题答案: 这取决于您使用的是哪种特定的.NET技术。该Mono项目提供运行ASP.N

  • 我需要使用服务帐户执行数据流作业,下面是同一平台中提供的一个非常简单和基本的wordcount示例。 根据这一点,GCP要求服务号具有数据流工作者的权限,以便执行我的作业。即使我已经设置了所需的权限,错误仍然出现时,堰部分会出现: 有人能解释这种奇怪的行为吗?太感谢了

  • 我有一个Google Cloud Dataflow作业,我正在使用以下命令字符串从IntelliJ IDEA运行该作业: 它从这里运行良好,我想把它部署到本地服务器上,以便在构建时自动运行。参数指定管道选项;在任何给定的构建中,我们都需要使用这个管道启动三个不同的作业,并且重新编译三次是很浪费的。所以我正在使用mvn包以以下方式生成一个jar文件: 问题是,当我通过项目目标目录中的Java-jar

  • 我需要在服务器上运行一个java jar,以便在两个应用程序之间进行通信。我写了两个shell脚本来运行它,但是一旦我启动了这个脚本,我就不能关闭/终止这个进程。如果我按ctrlC或关闭控制台,服务器将关闭。有人能帮我如何修改这个脚本以作为普通服务器运行吗?

  • 我们有现有的Spring批处理应用程序,我们希望使其可扩展以在多个节点上运行。 例如,我希望在不同的工作服务器上运行作业。在这种情况下,我有一个作业a和一个作业B,在worker server的一个实例上运行作业a,在worker server的另一个实例中运行作业B。 在spring batch integration文档中,我找到了一个关于SETP远程分区的解释。然而,我不知道如何从主服务器启