Câu hỏi 318 - Professional Data Engineer

A là đáp án đúng: Khởi chạy Dataflow với tham số --region=us-central1 mà không chỉ định rõ một vùng cụ thể ( --zone ) cho phép Dataflow tự động điều phối và chuyển đổi linh hoạt tài nguyên thực thi (workers) sang các vùng khả dụng khác trong khu vực đó nếu một vùng gặp sự cố.
D sai: Việc chỉ định cứng một vùng cụ thể như --zone=us-central1a sẽ loại bỏ khả năng tự động khôi phục đa vùng, khiến pipeline bị dừng hoàn toàn khi vùng đó gặp sự cố.
B và C sai: Dataflow tự động quản lý trạng thái của đường ống (thông qua các dịch vụ nội bộ được quản lý như Streaming Engine hoặc Shuffle Service) mà không yêu cầu người dùng phải tự cấu hình thủ công đĩa cứng khu vực hoặc bucket lưu trạng thái để đạt tính khả dụng cao cấp độ vùng.

Question #318 Topic 1

You are designing a stateful data processing pipeline that reads data from a Cloud Storage bucket and writes transformed data to a BigQuery table. The pipeline must be highly available and resilient to zonal failures within the us-central1 region. You need to configure a Dataflow pipeline ensuring minimal disruption during a zonal outage. What should you do?

Launch the Dataflow job with the --region=us-central1 parameter.

Deploy the Dataflow job to a single zone within us-central1 and configure it to use a regional persistent disk to store its state.

Deploy the Dataflow job to a single zone within us-central1 and use a multi-regional Cloud Storage bucket to store its state.

Launch the Dataflow job with the --zone=us-central1a parameter.

Tài liệu tham khảo: