Dataflow と BigQuery を使用した Google Cloud での ETL 処理（Python） のレビュー

Kondou Satoru · 6年以上前にレビュー済み

code snippet referred to in data_transformation.py - doesnt' seem to match that of what is in the git.

Shanmugam Hari · 6年以上前にレビュー済み

Kondou Satoru · 6年以上前にレビュー済み

1. Dataflow API's requires `--region` parameter, isn't part of command 2. Changes to `data_transformation.py` isn't required. 3. Worker quota issue while running `data_lake_to_mart.py`

kumar santhosh · 6年以上前にレビュー済み

Alamsyah Alamsyah · 6年以上前にレビュー済み

最後の設問は面白かったですが、 dataflowの実行コマンドで、 --region=us-central1　がないとerrorが出ました。

Sakacuhi Shinji · 6年以上前にレビュー済み

gsutilでエラー発生、dataflow_python_examples/data_ingestion.pyを起動するコマンドが誤っている。また、コマンド実行する権限が無いとのメッセージが出るため、別途、サービスアカウントの作成が必要。などなど、問題が多すぎる。チャトで報告。3日後に再度確認したが直っていなかった。

Iitsuka Takayoshi · 6年以上前にレビュー済み

copying files to bucket not working. reported to chat support

Seow Glen · 6年以上前にレビュー済み

bug with bucket access

Lenz Andrew · 6年以上前にレビュー済み

the copy data files step for usa_names.csv and head_usa_names.csv is not working due to insufficient permission

Pranata Ilung · 6年以上前にレビュー済み

error with copying files: gsutil cp gs://python-dataflow-example/data_files/head_usa_names.csv gs://$PROJECT/data_files/ AccessDeniedException: 403 There is an account problem for the requested project.

Roels Tim · 6年以上前にレビュー済み

gsutil cp gs://python-dataflow-example/data_files/usa_n ames.csv gs://$PROJECT/data_files/ AccessDeniedException: 403 There is an account problem for the requested project.

Moritsuka Toshiro · 6年以上前にレビュー済み

There is an issue regarding access to the source buckets necessary for this lab that is currently being worked on. I will revisit this lab at a later time and provide an updated review then.

Thornbury Alex · 6年以上前にレビュー済み

Unable to copy the specified source CSV files. Error returned by gsutil is AccessDeniedException "There is an account problem for the requested project."

Thornbury Alex · 6年以上前にレビュー済み

Kept running into the following issue: (venv) student_01_02b8577558ee@cloudshell:~/professional-services/examples/dataflow-python-examples (qwiklabs-gcp-01-49d056156c90)$ gsutil cp gs://python-dataflow-example/data_files/usa_names.csv . AccessDeniedException: 403 There is an account problem for the requested project.

Callaert Yves · 6年以上前にレビュー済み

Nakase Kenta · 6年以上前にレビュー済み

Patil Jayesh Vijay · 6年以上前にレビュー済み

Ahmad Masood Ahmad Dzakwan · 6年以上前にレビュー済み

Too many authentication-authorization errors and not enough time to correct them :(

Schenk Rolf · 6年以上前にレビュー済み

Schenk Rolf · 6年以上前にレビュー済み

wrong path gsutil cp gs://python-dataflow-example/data_files/usa_names.csv gs://$PROJECT/data_files/ gsutil cp gs://python-dataflow-example/data_files/head_usa_names.csv gs://$PROJECT/data_files/

Systems Epam · 6年以上前にレビュー済み

Lauritzen Mikkel Bloch · 6年以上前にレビュー済み

Lauritzen Mikkel Bloch · 6年以上前にレビュー済み

getting the following error while trying to access csv files: AccessDeniedException: 403 There is an account problem for the requested

Ambilwade Dheeraj · 6年以上前にレビュー済み

Access problem to get .csv data??

Kapsalis Bill · 6年以上前にレビュー済み