리뷰 Dataflow로 실시간 대시보드를 위한 스트리밍 데이터 파이프라인 만들기개

Laksh J. · 2년 초과 전에 리뷰됨

The ordering of the parameters in dataflow were not in order. Some of the parameters were in the additional options. I also received an error when trying to submit the dataflow job. It was an error relating to interval minutes not being supported. I had to pivot to using a gcloud command. This worked for me: gcloud dataflow jobs run streaming-taxi-pipeline --gcs-location gs://dataflow-templates-us-east1/latest/GCS_Text_to_BigQuery --region us-east1 --max-workers 2 --num-workers 1 --worker-machine-type e2-medium --staging-location gs://qwiklabs-gcp-02-73dac1891e2c-bucket/tmp --parameters inputFilePattern=gs://qwiklabs-gcp-02-73dac1891e2c-bucket/tmp/rt_taxidata.csv,JSONPath=gs://qwiklabs-gcp-02-73dac1891e2c-bucket/tmp/schema.json,outputTable=qwiklabs-gcp-02-73dac1891e2c:taxirides.realtime,bigQueryLoadingTemporaryDirectory=gs://qwiklabs-gcp-02-73dac1891e2c-bucket/tmp,javascriptTextTransformGcsPath=gs://qwiklabs-gcp-02-73dac1891e2c-bucket/tmp/transform.js,javascriptTextTransformFunctionName=transform

Ryan L. · 2년 초과 전에 리뷰됨

Peter T. · 2년 초과 전에 리뷰됨

Juan C. · 2년 초과 전에 리뷰됨

Cristina - Georgiana H. · 2년 초과 전에 리뷰됨

rework tutorial, I'm getting errors

Winfried B. · 2년 초과 전에 리뷰됨

Rahul T. · 2년 초과 전에 리뷰됨

Satisfied

Saurabh M. · 2년 초과 전에 리뷰됨

Satisfied

Saurabh M. · 2년 초과 전에 리뷰됨

Peter G. · 2년 초과 전에 리뷰됨

It improved when I tried loading data directly at the table creation from Cloud Storage instead of Data flow

Andres L. · 2년 초과 전에 리뷰됨

when choosing the exact mentioned template, then it is a batch job rather than the streaming job, and even when choosing the streaming job called something like "Cloud Storage text to Bigquery" then some of the titles of the parts here in the description have other names than the labels of the input fields. (eg output table)

Melanie D. · 2년 초과 전에 리뷰됨

Template can not work

Aya a N. · 2년 초과 전에 리뷰됨

Nilupuli N. · 2년 초과 전에 리뷰됨

Kasun H. · 2년 초과 전에 리뷰됨

Tomasz S. · 2년 초과 전에 리뷰됨

Samiksha G. · 2년 초과 전에 리뷰됨

Bilgehan K. · 2년 초과 전에 리뷰됨

nice

Mulpuru J. · 2년 초과 전에 리뷰됨

Akash P. · 2년 초과 전에 리뷰됨

Vera G. · 2년 초과 전에 리뷰됨

Shrujan R. · 2년 초과 전에 리뷰됨

Tanabut T. · 2년 초과 전에 리뷰됨

Kristina Pia D. · 2년 초과 전에 리뷰됨

Shashika K. · 2년 초과 전에 리뷰됨