请按照以下步骤使用Anaconda3将Apache Airflow与MySQL一起安装
1） 安装先决条件
yum install gcc gcc-c++ -yyum install libffi-devel mariadb-devel cyrus-sasl-devel -ydnf install redhat-rpm-config
2） 安装Anaconda3（Python 3.7.6随附）
yum install libXcomposite libXcursor libXi libXtst libXrandr alsa-lib mesa-libEGL libXdamage mesa-libGL libXScrnSaverwget https://repo.anaconda.com/archive/Anaconda3-2020.02-Linux-x86_64.shchmod +x Anaconda3-2020.02-Linux-x86_64.sh ./Anaconda3-2020.02-Linux-x86_64.sh
确保
conda initialize在安装过程中出现提示时执行此操作。这将确保在后续步骤中使用正确版本的python和pip。
3） 安装Apache Airflow
pip install apache-airflow[mysql,celery]
您可以根据需要添加其他子包。我只包含了Airflow使用MySQL数据库作为后端所需的内容。
4） 初始化气流
export AIRFLOW_HOME=~/airflowairflow initdb
从这里开始，我模仿了您配置MySQL Server所遵循的步骤
5） 安装MySQL服务器
rpm -Uvh https://repo.mysql.com/mysql80-community-release-el7-3.noarch.rpm sed -i 's/enabled=1/enabled=0/' /etc/yum.repos.d/mysql-community.repo yum --enablerepo=mysql80-community install mysql-server systemctl start mysqld.service
6） 登录到MySQL并为Airflow配置数据库
mysql> CREATE DATAbase airflow CHARACTER SET utf8 COLLATE utf8_unipre_ci; mysql> CREATE user 'airflow'@'localhost' identified by 'Airflow123'; mysql> GRANT ALL privileges on *.* to 'airflow'@'localhost';
7） 更新Airflow配置文件（〜/ airflow / airflow.cfg）
sql_alchemy_conn = mysql://airflow:Airflow123@localhost:3306/airflowexecutor = CeleryExecutor
8） 初始化气流
airflow initdb
