如何作为守护进程运行Spark应用程序
共有1个答案
对于这个用例，我见过的最佳选择是Spark Job Server，它将是守护进程应用程序，将驱动程序代码作为命名应用程序部署到它。
这个选项提供了更多的特性，比如持久性。
使用job server，您不需要编写自己的守护进程，您的客户端应用程序可以直接向它发送REST请求，后者将执行spark-submit任务。
-
问题内容： 我试过了 返回： 并尝试： 当我回车期望过程继续运行时，我收到： 如何将sbt作为守护程序运行？ 更新： 我认为cd上一个目录： 因此，它作为守护程序启动，但是如果我执行任何操作（如更改dir），它将终止该进程？如何保持进程运行？ 问题答案： 看起来像从您的终端请求的输入。如果它确实不需要输入（可能是在后台运行程序），则可以这样运行： 编辑 好的，这是一个难题。简短答案：运行如下： 理
-
问题内容： 我需要将php脚本作为守护进程运行（等待说明并执行操作）。cron工作不会为我做这件事，因为需要在指令到达后立即采取措施。我知道由于内存管理问题，PHP并不是守护进程的最佳选择，但是由于种种原因，在这种情况下我必须使用PHP。我遇到了libslack的一个名为Daemon的工具（http://libslack.org/daemon），它似乎可以帮助我管理守护进程，但是最近5年没有任何更
-
本文向大家介绍python实现守护进程、守护线程、守护非守护并行，包括了python实现守护进程、守护线程、守护非守护并行的使用技巧和注意事项，需要的朋友参考一下 守护进程 1、守护子进程 主进程创建守护进程 其一：守护进程会在主进程代码执行结束后就终止 其二：守护进程内无法再开启子进程,否则抛出异常：AssertionError: daemonic processes are not allow
-
问题内容： 我有一个使用Flask用Python编写的小应用程序。现在，我正在nohup下运行它，但是我想使其守护进程。这样做的正确方法是什么？ 问题答案： 使用gunicorn部署可能是最简单的方法，请先安装gunicorn，然后： 尽管你可能想使用主管或类似性质的工具来监视黑胶皮（at the very least use – so you can reload/stop gunicorn e
-
问题内容： 我有一个脚本，该脚本每隔X次运行一次我的PHP脚本： 如何将其作为守护程序启动？ 问题答案： 要将其作为完整的守护程序从Shell运行，您需要使用并重定向其输出。您可以将输出重定向到日志文件，也可以将其丢弃。假设您的脚本名为myscript.sh，请使用以下命令： 这会将进程与当前的shell（stdin，stdout和stderr）完全分开。如果要将输出保留在日志文件中，请用/ pa
-
守护(Daemon)进程 我们可以认为守护进程就是后台服务进程，因为它会有一个很长的生命周期提供服务，关闭终端不会影响服务，也就是说可以忽略某些信号。 实现守护进程 首先要保证进程在后台运行，可以在启动程序后面加&，当然更原始的方法是进程自己fork然后结束父进程。 if (pid=fork()) { exit(0); // Parent process } 然后是与终端、进程组、会话(Ses