大佬教程收集整理的这篇文章主要介绍了Apache Airflow 2.0 Celery Executor 安装,大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。
我知道对于 Airflow CeleryExecutor,需要 celery 和 rabbitmq(或 redis)。
是否只需运行 pip install apache-airflow[celery,rabbitmq]
即可满足要求,还是需要运行 sudo yum install rabbitmq-server
和 pip install celery
?
我的问题是针对 Airflow 2.0+
如果您在全新的虚拟环境中安装 apache-airflow[celery]
,您会看到它已经为您安装了 celery
。因此,pip install celery
是多余的。
您确实需要rabbitMQ 服务器(实际过程)。或者,您可以在 docker 中使用 rabbitMQ。
不确定 apache-airflow[rabbitmq]
,因为我知道 Celery 使用 amqp
协议与 rabbitMQ 通信。 amqp==5.0.6
软件包与 celery
的安装一起安装(由 pip install apache-airflow[celery]
发生)。
以上是大佬教程为你收集整理的Apache Airflow 2.0 Celery Executor 安装全部内容,希望文章能够帮你解决Apache Airflow 2.0 Celery Executor 安装所遇到的程序开发问题。
如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。
本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。