SAA-C03 · Pozyskiwanie danych, jeziora danych i analityka
Kinesis Data Streams a Amazon Data Firehose
Najważniejsze
- Kinesis Data Streams: shardy trzymają rekordy domyślnie 24 godziny, do 365 dni.
- Własni konsumenci, kilku czyta te same dane, możliwy replay; shardy provisioned lub on-demand.
- Amazon Data Firehose: zarządzane dostarczanie, bez shardów i kodu konsumenta.
- Buforuje i ładuje do S3, Redshift, OpenSearch, Splunk, HTTP; transformacja Lambda, JSON do Parquet/ORC.
- Data Streams: własne przetwarzanie na żywo, replay; Firehose: ładowanie bez wysiłku.
Źródło: https://docs.aws.amazon.com/streams/latest/dev/key-concepts.html
Przykładowe pytania
Jak długo nowy strumień danych Kinesis domyślnie przechowuje rekordy?
- 1 godzinę
- 24 godziny
- 7 dni
- 365 dni
Pokaż odpowiedź
Odpowiedź: B. 24 godziny
Nowy strumień przechowuje rekordy przez 24 godziny. Retencję można podnieść do 365 dni (8760 godzin) za dodatkową opłatą, ale to nie jest wartość domyślna.
Które stwierdzenia o Amazon Data Firehose są prawdziwe?
- Nie wymiarujesz shardów ani nie piszesz aplikacji konsumentów
- Przechowuje rekordy do 365 dni, aby konsumenci mogli je odtwarzać
- Może ładować dane do Amazon Redshift przez etap pośredni w S3
- Może konwertować przychodzące rekordy JSON do Parquet lub ORC
- Każdy zespół podłącza do niego własnego konsumenta KCL
Pokaż odpowiedź
Odpowiedź: A. Nie wymiarujesz shardów ani nie piszesz aplikacji konsumentów, C. Może ładować dane do Amazon Redshift przez etap pośredni w S3, D. Może konwertować przychodzące rekordy JSON do Parquet lub ORC
Firehose nie wymaga wymiarowania shardów ani kodu konsumenta; potrafi dostarczać do Redshift (przez etap pośredni w S3 i polecenie COPY); umie też konwertować JSON do Parquet lub ORC. Odtwarzanie przechowywanych rekordów przez wiele dni i wielu własnych konsumentów to cechy Kinesis Data Streams, nie Firehose.
Amazon Data Firehose pozwala kilku niezależnym aplikacjom czytać te same rekordy i odtwarzać je od wcześniejszego punktu, tak samo jak Kinesis Data Streams.
Pokaż odpowiedź
Odpowiedź: Fałsz
Fałsz. Firehose dostarcza zbuforowane rekordy do miejsca docelowego; nie jest strumieniem, z którego aplikacje czytają lub który przewijają. Wielu niezależnych konsumentów i odtwarzanie w okresie retencji oferuje Kinesis Data Streams.
Przećwicz 8 pytań z tego tematu w Bitzu
Krótkie lekcje, natychmiastowe wyjaśnienia i powtórki tego, w czym się mylisz. Za darmo na iOS i Androida.
