Associate Cloud Engineer · Produkty storage i ładowanie danych
Ładowanie danych do Google Cloud
Najważniejsze
- Do około 1 TB: gcloud storage cp / rsync.
- Powyżej 1 TB: Storage Transfer Service (źródła m.in. S3, Azure Blob, listy URL, systemy plików; agenci dla danych lokalnych).
- Słaba lub brak łączności: Transfer Appliance (kopiujesz lokalnie, wysyłasz do Google).
- Z Cloud Storage dalej: bq load do BigQuery (bucket i zbiór danych w tej samej lokalizacji).
Źródło: https://docs.cloud.google.com/storage-transfer/docs/transfer-options
Przykładowe pytania
Które polecenie wysyła lokalny plik do bucketa Cloud Storage?
- gcloud storage cp
- gcloud storage buckets create
- bq load
- gcloud compute scp
Pokaż odpowiedź
Odpowiedź: A. gcloud storage cp
gcloud storage cp kopiuje między ścieżkami lokalnymi a adresami gs://. rsync synchronizuje całe drzewa, a pozostałe dwa nie służą do wysyłania plików.
Które z poniższych może być źródłem dla Storage Transfer Service?
- Amazon S3
- Microsoft Azure Blob Storage
- Tabele w instancji Cloud SQL
- Lokalny system plików
- Tabele w BigQuery
Pokaż odpowiedź
Odpowiedź: A. Amazon S3, B. Microsoft Azure Blob Storage, D. Lokalny system plików
Obsługuje m.in. Amazon S3, Azure Blob Storage i systemy plików (przez agentów). Tabele Cloud SQL i BigQuery to bazy danych, nie obsługiwane źródła transferu.
Domyślnie gcloud storage rsync usuwa w miejscu docelowym obiekty, których nie ma w źródle.
Pokaż odpowiedź
Odpowiedź: Fałsz
Fałsz. Nadmiarowe obiekty w celu są zachowywane, dopóki nie dodasz --delete-unmatched-destination-objects, które potrafi szybko skasować dane przy złych argumentach.
Przećwicz 8 pytań z tego tematu w Bitzu
Krótkie lekcje, natychmiastowe wyjaśnienia i powtórki tego, w czym się mylisz. Za darmo na iOS i Androida.
