Associate Cloud Engineer · Wybór i wdrażanie usług danych
BigQuery, Pub/Sub, Dataflow i Kafka
Najważniejsze
- BigQuery: bezserwerowa hurtownia; zbiory danych (lokalizacja przy tworzeniu) i tabele.
- Pub/Sub: wydawcy wysyłają do tematu; subskrypcja należy do jednego tematu, dostarcza przez pull lub push.
- Niepotwierdzone wiadomości czekają przez okres retencji (domyślnie 7 dni).
- Dataflow: bezserwerowy Apache Beam, wsadowo i strumieniowo, szablony np. Pub/Sub do BigQuery.
- Managed Service for Apache Kafka: zarządzane klastry dla API i narzędzi Kafki.
Źródło: https://docs.cloud.google.com/dataflow/docs/overview
Przykładowe pytania
Która usługa Google Cloud uruchamia potoki Apache Beam dla danych wsadowych i strumieniowych?
- Pub/Sub
- Dataflow
- BigQuery
- Cloud SQL
Pokaż odpowiedź
Odpowiedź: B. Dataflow
Dataflow to zarządzany runner potoków Beam. Pub/Sub tylko przesyła wiadomości, a BigQuery przechowuje i odpytuje dane.
Które stwierdzenia o Dataflow są poprawne?
- Jest zbudowany na Apache Beam.
- Obsługuje tylko potoki strumieniowe.
- Zarządza maszynami roboczymi zadania i może je automatycznie skalować.
- Przed uruchomieniem zadania trzeba utworzyć i aktualizować klaster.
- Obsługuje przetwarzanie wsadowe i strumieniowe.
Pokaż odpowiedź
Odpowiedź: A. Jest zbudowany na Apache Beam., C. Zarządza maszynami roboczymi zadania i może je automatycznie skalować., E. Obsługuje przetwarzanie wsadowe i strumieniowe.
Dataflow jest bezserwerowy, oparty na Apache Beam i obsługuje przetwarzanie wsadowe i strumieniowe. Nie ogranicza się do strumieni i nie wymaga samodzielnego zakładania klastra.
Prawda czy fałsz: Dataflow przetwarza tylko dane strumieniowe, więc zadania wsadowe wymagają innej usługi.
Pokaż odpowiedź
Odpowiedź: Fałsz
Fałsz. Dataflow ma jeden model programowania dla potoków wsadowych i strumieniowych.
Przećwicz 8 pytań z tego tematu w Bitzu
Krótkie lekcje, natychmiastowe wyjaśnienia i powtórki tego, w czym się mylisz. Za darmo na iOS i Androida.
