Cloud Composer のバージョン リスト

Cloud Composer により、標準の Airflow リリースを他の一般的なバイナリや Python ライブラリにバンドルした Docker イメージが構築されます。構築された Docker イメージは、Cloud Composer の各サービス リリースでバージョニングされます。

サポート対象の Cloud Composer のバージョン

新しい環境

次の表は、Cloud Composer が新しい環境の作成をサポートしている Apache Airflow と Python のバージョンを示しています。

この表では、プリインストールされた PyPI パッケージ、バックポートされた修正、各バージョンのカスタマイズも示しています。

バージョン Airflow バージョン サポート対象 Python バージョン PyPI パッケージ カスタマイズ リリース日 備考
composer-1.6.1-airflow-1.10.1 1.10.1 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 4 月 4 日
composer-1.6.1-airflow-1.10.0 1.10.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 4 月 4 日
composer-1.6.1-airflow-1.9.0 1.9.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 4 月 4 日 デフォルト バージョン

前の環境

次の表では、前のバージョンの Cloud Composer が既存の環境をサポートする Apache Airflow と Python のバージョンを示しています。

バージョン Airflow バージョン サポート対象 Python バージョン PyPI パッケージ カスタマイズ リリース日 備考
composer-1.6.0-airflow-1.10.1 1.10.1 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 4 月 3 日
composer-1.6.0-airflow-1.10.0 1.10.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 4 月 3 日
composer-1.6.0-airflow-1.9.0 1.9.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 4 月 3 日
composer-1.5.2-airflow-1.10.1 1.10.1 2, 3 composer-1.5.0-airflow-1.9.0 と同様composer-1.5.0-airflow-1.9.0 と同様 2019 年 3 月 11 日
composer-1.5.2-airflow-1.10.0 1.10.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 3 月 11 日
composer-1.5.2-airflow-1.9.0 1.9.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 3 月 11 日
composer-1.5.1-airflow-1.10.1 1.10.1 2, 3 composer-1.5.0-airflow-1.9.0 と同様composer-1.5.0-airflow-1.9.0 と同様 2019 年 3 月 7 日 2019 年 3 月 11 日にロールバック
composer-1.5.1-airflow-1.10.0 1.10.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 3 月 7 日 2019 年 3 月 11 日にロールバック
composer-1.5.1-airflow-1.9.0 1.9.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 3 月 7 日 2019 年 3 月 11 日にロールバック
composer-1.5.0-airflow-1.10.1 1.10.1 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 2 月 6 日
composer-1.5.0-airflow-1.10.0 1.10.0 2, 3 composer-1.5.0-airflow-1.9.0 と同様 composer-1.5.0-airflow-1.9.0 と同様 2019 年 2 月 6 日
composer-1.5.0-airflow-1.9.0 1.9.0 2, 3 click==6.7、redis==2.10.6、celery[redis]、flower、google-api-python-client、google-cloud-bigquery、google-cloud-container、google-cloud-logging、google-cloud-storage、iso8601、kubernetes、protobuf、sendgrid、tensorflow、pipdeptree
- Airflow 任意の依存関係: mysql、password、postgres、gcp_api、crypto
- Python 2: google-cloud-dataflow>=2.5.0、tensorflow-transform
- Python 3: virtualenv
- CVE-2018-20244 のバックポートされた修正: Apache Airflow に XSS を保存
- DataflowJavaOperator と DataflowPythonOperator で GCP 接続が切断されていた問題のバックポートされた修正
2019 年 2 月 6 日 デフォルト バージョン
composer-1.4.2-airflow-1.10.0 1.10.0 2, 3 composer-1.3.0-airflow-1.9.0 と同様 composer-1.3.0-airflow-1.9.0 と同様 2019 年 1 月 10 日
composer-1.4.2-airflow-1.9.0 1.9.0 2, 3 composer-1.3.0-airflow-1.9.0 と同様 composer-1.3.0-airflow-1.9.0 と同様 2019 年 1 月 10 日
composer-1.4.1-airflow-1.10.0 1.10.0 2, 3 composer-1.3.0-airflow-1.9.0 と同様 composer-1.3.0-airflow-1.9.0 と同様 2018 年 12 月 17 日
composer-1.4.1-airflow-1.9.0 1.9.0 2, 3 composer-1.3.0-airflow-1.9.0 と同様 composer-1.3.0-airflow-1.9.0 と同様 2018 年 12 月 17 日
composer-1.4.0-airflow-1.10.0 1.10.0 2, 3 composer-1.3.0-airflow-1.9.0 と同様 composer-1.3.0-airflow-1.10.0 にパッチ googleapiclient set_user_agent を適用 2018 年 11 月 26 日
composer-1.4.0-airflow-1.9.0 1.9.0 2, 3 composer-1.3.0-airflow-1.9.0 と同様 composer-1.3.0-airflow-1.9.0 と同様 2018 年 11 月 26 日
composer-1.3.0-airflow-1.10.0 1.10.0 2, 3 composer-1.3.0-airflow-1.9.0 と同様 - Airflow ウェブ UI に表示される環境名
- explicit_defaults_for_timestamp=ON なしで AirFlow 1.10.0 で MySQL を操作するためのスキーマパッチ
- バックポート GKEPodOperator
- GCP に関連する演算子のいくつかの改善のバックポート
- BashTaskRunner の安定性の修正
2018 年 10 月 24 日
composer-1.3.0-airflow-1.9.0 1.9.0 2, 3 urllib3==1.23、requests==2.19.1、celery[redis]、flower、google-api-python-client、google-cloud-bigquery、google-cloud-container、google-cloud-logging、google-cloud-storage、iso8601、kubernetes、protobuf、sendgrid、tensorflow composer-1.2.0-airflow-1.9.0 に Airflow ウェブ UI に表示される環境名を適用 2018 年 10 月 24 日
composer-1.2.0-airflow-1.9.0 1.9.0 2, 3 composer-1.0.0-airflow-1.9.0 と同様 composer-1.1.1-airflow-1.9.0 と同様 2018 年 10 月 2 日 - Python 2.7.13、Python 3.6.6
- スケジューラの再起動動作を時間ベース(10 分)に更新
composer-1.1.1-airflow-1.9.0 1.9.0 2 composer-1.0.0-airflow-1.9.0 と同様 composer-1.1.0-airflow-1.9.0 に緩和した celeryd の同時実行の構成を適用 2018 年 9 月 17 日
composer-1.1.0-airflow-1.9.0 1.9.0 2 composer-1.0.0-airflow-1.9.0 と同様 composer-1.0.0-airflow-1.9.0 に:
- DataprocClusterCreateOperator のバックポートされたネットワーク/サブネットワーク/タグのサポート
- バックポートされた GkePodOperator
- バックポートされたデータフロー ジョブの不一致の修正
2018 年 8 月 17 日 Airflow スケジューラのヘルスチェックは、現在 Stackdriver Logging の有効化に依存
composer-1.0.0-airflow-1.9.0 1.9.0 2 google-cloud-bigquery、google-cloud-dataflow、google-cloud-storage、pandas、pandas-gbq、tensorflow、tensorflow-transform、sendgrid - バックポートされた KubernetesPodOperator、JDBC / DBAPI 自動 commit の修正
- PARQUET ソースを bigquery_hook に追加
- Dataflow マルチリージョン サポートを追加
- Airflow ウェブサーバーの Airflow ドキュメント リンクの修正
- StatsD Exception による Airflow ウェブサーバーのクラッシュ ループの修正

サポート対象外の Cloud Composer のバージョン

次の Cloud Composer のバージョンはサポートされていません。Cloud Composer では、これらのバージョンで作成された環境のアップデートとサポートは提供されません。

  • ベータ版 composer-0.*.*-airflow-*.*.*

サポートされていないバージョンで作成した環境を引き続き実行できますが、サポートされているバージョンに環境を移行することをおすすめします。

バージョンのサポート終了については、Cloud Composer のバージョニングをご覧ください。

このページは役立ちましたか?評価をお願いいたします。

フィードバックを送信...