iT邦幫忙

2024 iThome 鐵人賽

DAY 23
0

前一回,稍微看過了 Amazon Kinesis Data Streams,今天來說說另外一個也冠名 Kinesis 的服務 - Amazon Kinesis Firehose

REF

概念

  • Firehose 的字面上意思是消防栓,拿來射水的東西。 這邊要把它聯想成一根大水管,用來把水注入湖(資料湖)中的水管。
  • 用資料佇列接資料,是為了避免資料太多太頻繁,用單純的虛擬主機應付不來。 但是這種 I/O 快速的訊息佇列,不是用來堆東西的,在收到資料的時候,要儘早把資料搬去堆放。 因此才需要射水用的消防栓。
  • 上游: 水從何而來? 可以從 Kinesis Data Stream / MSK (Kafka) / 或是直接從 Kinesis Firehose SDK 提供的 Put 方法直接餵進去
  • 下游: 水要灌到哪裡去?

結論

  • 一堆資料視覺化的工具可以接,不過考試不太會提到這些服務,AWS的文件中也沒列出那些連結。 那些連結咧,是我剛剛一個一個找連結貼上來的。
  • 有畫粗體的那些東西,才是可能會在考試中看到的東西。

上一篇
【Day 22】 Amazon Kinesis Data Streams 的簡單介紹
下一篇
【Day 24】 Amazon MQ / Amazon Managed Streaming for Apache Kafka (MSK)
系列文
老闆,外帶一份 AWS Certified Data Engineer30
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言