技術問答
技術文章
iT 徵才
Tag
聊天室
2025 鐵人賽
登入/註冊
問答
文章
Tag
邦友
鐵人賽
搜尋
2024 iThome 鐵人賽
DAY
22
0
佛心分享-我的證照是這樣攻略的
老闆,外帶一份 AWS Certified Data Engineer
系列 第
22
篇
【Day 22】 Amazon Kinesis Data Streams 的簡單介紹
16th鐵人賽
aws
dea-c01
data engineer
kinesis
二坪山小弱砲
2024-10-06 22:58:34
287 瀏覽
分享至
在前面做題庫的部分,出現了關於 「Amazon Kinesis Data Streams」,所以今天來說說這個服務。
REF
Amazon Kinesis Data Streams
概念
看到 Kinesis 系列的服務,主要有三類四種。
Stream 類
Data Stream
Video Stream
Firehose 類
Analytics 類
今天先來講
Data Streams
文件都說他是低延遲的服務(70 ms),可以用來收串流資料,或者收影像串流。
一些會源源不絕吐出資料的地方,像是股匯市行情、或路面監視器、網路直播軟體產生的影像,如果從程式端接收時,會疲於奔命處理而無暇應付,例如網路頻寬不足,或者是儲存設備速度無法配合等。 採用 Stream 可以作為負責作為接收資料的最前緣,並制定需要保留的緩衝區保鮮期,可以有助於應付洪水猛獸般的龐大資料串流。
重要區別 / 和 SQS 比較
Kinesis 可以重複播放(Replay),而另一種類似的 SQS 訊息佇列則不行
串流資料單個資料碎片大小可以支援到 1MB,SQS 訊息單封最多 256KB
Kinesis 可以多人同時收聽; SQS 是訊息排隊的佇列,所以只能被消費一次(be consumed by consumer once)
Kinesis Stream 內的資料可以留存 1天 ~ 1年之久; SQS 的資料則可以留 1分鐘 ~ 14天
結論
適合接收源源不絕的資料
理論上是扛得住群體圍毆
留言
追蹤
檢舉
上一篇
【Day 21】 做題庫小試身手 - 5
下一篇
【Day 23】 Amazon Kinesis Firehose 的簡單介紹
系列文
老闆,外帶一份 AWS Certified Data Engineer
共
30
篇
目錄
RSS系列文
訂閱系列文
10
人訂閱
26
【Day 26】 做題庫小試身手 - 7
27
【Day 27】 做題庫小試身手 - 8
28
【Day 28】 做題庫小試身手 - 9
29
【Day 29】 做題庫小試身手 - 10
30
【Day 29】 做題庫小試身手 - 11
完整目錄
熱門推薦
{{ item.subject }}
{{ item.channelVendor }}
|
{{ item.webinarstarted }}
|
{{ formatDate(item.duration) }}
直播中
立即報名
尚未有邦友留言
立即登入留言
iThome鐵人賽
參賽組數
902
組
團體組數
37
組
累計文章數
10102
篇
完賽人數
98
人
看影片追技術
看更多
{{ item.subject }}
{{ item.channelVendor }}
|
{{ formatDate(item.duration) }}
直播中
熱門tag
看更多
15th鐵人賽
16th鐵人賽
13th鐵人賽
14th鐵人賽
12th鐵人賽
11th鐵人賽
鐵人賽
17th鐵人賽
2019鐵人賽
javascript
2018鐵人賽
python
2017鐵人賽
windows
php
c#
windows server
linux
css
react
熱門問題
Esxi 8.0版本上的虛擬機器, 安裝的作業系統是Windows Server 2025, 確定輸入的密碼是正確的, 無法登入(顯示密碼錯誤)
【求助】顯卡/主板 支援 PCIe4.0 為何 Host to Device (H2D) 只剩 Gen1 速度 (0.5 GB/s) ?
請問今天鐵人賽的發文系統是否故障?
Windows GPO Bitlocker
HP iLo Advanced trial license
在線求大神,千奧軟體主機怎麼安裝
Docker Compose 建立 GitLab 容器,執行器 Runner 運行流水線問題
windows server無法使用gpedit.msc
Java證照題目(main() method)
因為網路磁碟的關係造成系統自動重新開機
熱門回答
Esxi 8.0版本上的虛擬機器, 安裝的作業系統是Windows Server 2025, 確定輸入的密碼是正確的, 無法登入(顯示密碼錯誤)
Windows GPO Bitlocker
【求助】顯卡/主板 支援 PCIe4.0 為何 Host to Device (H2D) 只剩 Gen1 速度 (0.5 GB/s) ?
windows server無法使用gpedit.msc
因為網路磁碟的關係造成系統自動重新開機
熱門文章
[為你自己學 Gemini CLI ... 的原始碼] 第 2 天,主程式裡的 Hello Kitty!
第30天,完賽心得 / 葉家藥燉排骨 在地排隊美食(新北板橋)| 30天滷肉飯
[為你自己學 n8n] 第 3 天,打開控制台,認識你的自動化駕駛艙!
第4天,數位憑證的產生 / 中崙張記藥膳排骨 排骨讚(台北松山)| 30天滷肉飯
第4天,Cloudflare Public DNS 與 WARP / 滷小小 美味的滷味 | 30天板橋湳雅夜市
IT邦幫忙
×
標記使用者
輸入對方的帳號或暱稱
Loading
找不到結果。
標記
{{ result.label }}
{{ result.account }}