Serverless Data Processing with Dataflow - CI/CD with Dataflow Ulasan

Aakruti r. · Diulas lebih dari 1 tahun lalu

error in code

Mayuri Raosaheb H. · Diulas lebih dari 1 tahun lalu

student_01_cf1b96191b9b@cloudshell:~/ci-cd-for-data-processing-workflow/env-setup (qwiklabs-gcp-03-0b279afe1e99)$ gcloud composer environments create $COMPOSER_ENV_NAME \ --location $COMPOSER_REGION \ --zone $COMPOSER_ZONE_ID \ --python-version 3 \ --image-version composer-1.20.8-airflow-1.10.15 ERROR: (gcloud.composer.environments.create) INVALID_ARGUMENT: Found 1 problem: 1) Invalid image version: 'composer-1.20.8-airflow-1.10.15' derived based on your input: 'composer-1.20.8-airflow-1.10.15'. Currently suggested new environment image versions are: [composer-2.6.6-airflow-2.7.3, composer-2.6.6-airflow-2.6.3, composer-2.6.6-airflow-2.5.3]. Task2 is not working with given script it is giving above error

Prakash Kumar G. · Diulas lebih dari 1 tahun lalu

Cannot create the desiired cloud composer environtment due to outdated version of composer and airflow, when i made the newer environmet, task 5 always failed, its impossible to finish

Yoga F. · Diulas lebih dari 1 tahun lalu

Bogdan M. · Diulas lebih dari 1 tahun lalu

Mahesh B. · Diulas lebih dari 1 tahun lalu

Bruno R. · Diulas lebih dari 1 tahun lalu

Arkadiusz J. · Diulas lebih dari 1 tahun lalu

Akash P. · Diulas lebih dari 1 tahun lalu

Arkadiusz J. · Diulas lebih dari 1 tahun lalu

Lab not working

Samson O. · Diulas lebih dari 1 tahun lalu

Leontinus Y. · Diulas lebih dari 1 tahun lalu

sreehari R. · Diulas lebih dari 1 tahun lalu

ERROR: (gcloud.composer.environments.create) INVALID_ARGUMENT: Found 1 problem: 1) Invalid image version: 'composer-1.20.12-airflow-2.3.4' derived based on your input: 'composer-1.20.12-airflow-2.3.4'. Currently suggested new environment image versions are: [composer-2.6.4-airflow-2.6.3, composer-2.6.4-airflow-2.5.3]. Cloud Composer 1 will reach the end of support on March 25, 2024. Creation of new Cloud Composer 1 environments is only possible if the project already contains a Composer 1 environment in the same location. We recommend migration to Cloud Composer 2. ERROR: (gcloud.composer.environments.create) INVALID_ARGUMENT: Found 1 problem: 1) Configuring node location is not supported for Cloud Composer environments in versions 2.0.0 and newer.

Serhii Z. · Diulas lebih dari 1 tahun lalu

This lab is a complete mess. Workaround fixes take 4 or more runs.

Benjamin M. · Diulas lebih dari 1 tahun lalu

This lab is a complete mess.

Benjamin M. · Diulas lebih dari 1 tahun lalu

This lab is a complete mess.

Benjamin M. · Diulas lebih dari 1 tahun lalu

Łukasz S. · Diulas lebih dari 1 tahun lalu

Broken DAG (dags/data-pipeline-test.py): Traceback (most recent call last): File "/opt/python3.11/lib/python3.11/site-packages/airflow/models/baseoperator.py", line 429, in apply_defaults result = func(self, **kwargs, default_args=default_args) ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ File "/opt/python3.11/lib/python3.11/site-packages/airflow/models/baseoperator.py", line 788, in __init__ raise AirflowException( airflow.exceptions.AirflowException: Invalid arguments were passed to PubSubPublishMessageOperator (task_id: publish_test_complete). Invalid arguments were: **kwargs: {'project': 'qwiklabs-gcp-01-9f8c1692d8a8'}

Alex W. · Diulas lebih dari 1 tahun lalu

This lab is out of date

Andre L. · Diulas lebih dari 1 tahun lalu

Impossible to finish this lab because version of environments do not supports anymore

Oleh A. · Diulas lebih dari 1 tahun lalu

many issues in labs

Mayuri Raosaheb H. · Diulas lebih dari 1 tahun lalu

Kept failing to build

Brendan J. · Diulas lebih dari 1 tahun lalu

Broken DAG (dags/data-pipeline-test.py): Traceback (most recent call last): File "/opt/python3.11/lib/python3.11/site-packages/airflow/models/baseoperator.py", line 429, in apply_defaults result = func(self, **kwargs, default_args=default_args) ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ File "/opt/python3.11/lib/python3.11/site-packages/airflow/models/baseoperator.py", line 788, in __init__ raise AirflowException( airflow.exceptions.AirflowException: Invalid arguments were passed to PubSubPublishMessageOperator (task_id: publish_test_complete). Invalid arguments were: **kwargs: {'project': 'qwiklabs-gcp-01-9f8c1692d8a8'}

Alex W. · Diulas lebih dari 1 tahun lalu