Bitzu

AZ-305 · Integracja i analiza danych

Architektura data lake

Najważniejsze

  • Azure Data Lake Storage: hierarchiczna przestrzeń nazw, katalogi, ACL w stylu POSIX.
  • Medallion: bronze/raw (jak dostarczone, dopisywane), silver/validated (oczyszczone, deduplikowane, ze schematem), gold/curated (zagregowane dla BI, ML).
  • Delta Lake: Parquet plus dziennik transakcji (ACID, aktualizacje, time travel).
  • RBAC najpierw: ACL nie odbierze dostępu z roli; ACL dla grup.
  • Shared Key i SAS konta/usługi omijają RBAC i ACL.

Źródło: https://learn.microsoft.com/en-us/azure/databricks/lakehouse/medallion

Przykładowe pytania

Jednokrotny wybór

Które ustawienie konta magazynu zamienia Blob Storage w Azure Data Lake Storage z prawdziwymi katalogami i listami ACL w stylu POSIX?

  1. Hierarchiczna przestrzeń nazw
  2. Warstwa dostępu Cool
  3. Magazyn geo-strefowo nadmiarowy
  4. Wersjonowanie obiektów blob
Pokaż odpowiedź

Odpowiedź: A. Hierarchiczna przestrzeń nazw

Włączenie hierarchicznej przestrzeni nazw daje kontu prawdziwą strukturę katalogów oraz ACL na plikach i katalogach. Warstwy dostępu, geo-nadmiarowość i wersjonowanie wpływają na koszt, trwałość lub odzyskiwanie, a nie na model przestrzeni nazw.

Zaznacz wszystkie poprawne

Które cechy opisują warstwę bronze (raw) w jeziorze danych typu medallion?

  1. Dane są przechowywane w postaci dostarczonej przez źródło
  2. Rekordy są deduplikowane, a schemat wymuszany
  3. Historia jest zachowana na potrzeby ponownego przetwarzania lub audytu
  4. Dane są agregowane do modeli wymiarowych dla BI
  5. Stosuje się niewielkie czyszczenie lub walidację albo żadne
Pokaż odpowiedź

Odpowiedź: A. Dane są przechowywane w postaci dostarczonej przez źródło, C. Historia jest zachowana na potrzeby ponownego przetwarzania lub audytu, E. Stosuje się niewielkie czyszczenie lub walidację albo żadne

Bronze przechowuje dane źródłowe w pierwotnej postaci, rośnie przez przyrostowe dopisywanie i zachowuje historię, aby można było ponownie przetworzyć dane lub je audytować, przy minimalnej walidacji. Usuwanie duplikatów i wymuszanie schematu odbywa się w silver, a modele wymiarowe i agregaty należą do gold.

Prawda czy fałsz

Jeśli użytkownik ma Storage Blob Data Contributor na kontenerze Data Lake Storage, nadal można zablokować mu jeden katalog restrykcyjną listą ACL.

Pokaż odpowiedź

Odpowiedź: Fałsz

Fałsz. Przypisania ról (i ich warunki) są oceniane przed ACL. Gdy rola już daje wystarczający dostęp, ACL nie są sprawdzane, więc ACL nie może zawęzić dostępu przyznanego przez rolę. Trzeba zawęzić zakres roli albo ją usunąć i użyć ACL.

Przećwicz 8 pytań z tego tematu w Bitzu

Krótkie lekcje, natychmiastowe wyjaśnienia i powtórki tego, w czym się mylisz. Za darmo na iOS i Androida.

Download on the App StoreGet it on Google Play

Więcej tematów AZ-305 w tym module