气流Kubernetes Executor运行任何操作员？
我正在评估我当前的气流部署从Celery executor到Kubernetes(K8s)executor的迁移，以利用Pods提供的资源动态分配和任务隔离。
我很清楚，我们可以使用本机的KubernetesPodOperator通过K8s Executor在K8s集群上运行任务。但是，我找不到关于K8s executor与其他操作符（如bash和Athena）之间兼容性的信息。
这里的问题是，是否可能运行一个bash（或任何其他）操作员在一个K8s动力气流，或者我应该迁移我的所有任务到KubernetesPodOperator？
共有1个答案
Kubernetes executor将与所有操作员一起工作。
使用Kubernetes executor将为每个任务创建一个worker pod，而不是像celery executor那样使用celery worker。
使用KubernetesPodOperator将拉出任何特定的映像来启动一个豆荚并执行任务。
因此，如果将KubernetesPodOperator与KubernetesExecutor一起使用，Airflow将为您的任务启动一个工作豆荚，而该任务将启动一个豆荚并监视其执行。1个任务的2个吊舱。
如果在KubernetesExecutor中使用BashOperator，Airflow将启动一个辅助吊舱，并在该辅助吊舱上执行bash命令。1个任务的1个吊舱。
-
我的 Windows 机器上运行了一个 docker 容器，它是使用官方文档中提供的 docker-compose 文件的改编版本构建的。 这工作得很好，但是我想将python脚本（我的任务）从已挂载的文件夹中移动到它们自己的docker容器中。 为了测试这一点，我创建了一个简单的“Hello World！”示例-脚本: 它与以下简单的docker文件一起 我可以用< code > docker
-
问题内容： 我正在运行一个Electron项目，一切都很好。但是现在，当我运行package.json中的任何脚本（包括npm start）时，它只是转义了一行而没有执行任何操作。 我的package.json： 我尝试更新NPM，但没有用。当我在其他项目中尝试过时，也不起作用。 提前致谢 问题答案： npm具有配置密钥。它的期望值是布尔值，默认设置为。 可能是由于疏忽而将其设置为。 要/ 的配置
-
运行气流的一般说明不适用于Windows环境： 气流实用程序在命令行中不可用，我在其他地方找不到它可以手动添加。气流如何在Windows上运行？
-
我有一个容器Airflow安装程序，使用LocalExector在马拉松上运行。我运行了一个运行状况检查，可以ping Airflow网络服务器上的endpoint。它目前有5个cpu分配给它，网络服务器正在运行4个Gunicorn。昨晚我有大约25个任务同时运行。这导致健康检查失败，没有一条有用的错误消息。容器刚刚收到一个SIGTERM。我想知道是否有人可以提出导致健康检查失败的可能罪魁祸首？是
-
我试图创建和运行一个豆荚使用气流kubernetes豆荚操作员。下面的命令被尝试并确认有效，我正试图在本地使用kubernetes pod操作符复制相同的命令 有没有办法将serviceaccount标志传递给airflow kubernetes操作员？ 谢了！
-
我使用的是Activti版本6.0.0。 我想同步执行活动中的任务，但我有一个长时间运行的任务，可能需要20分钟来执行。我想在我的控制器中快速获得过程实例ID，而不考虑在bpmn中完成任务，所以我在bpmn文件中添加了一个中间计时器事件“0分钟”。 我已经开始执行一个进程，比如说processInstanceid p1。当时只有我再次启动这个进程，比如说使用processInstanceid p2