iT邦幫忙

gcp相關文章
共有 248 則文章

技術 部署Google Cloud的機器學習流水線

關於GCP 機器學習(後面會簡稱ML)的pipeline部署分為好幾個階段。從data ingestion/preparation再到根據訓練出來的模型來做da...

技術 Google Cloud的資料靈活性與可攜性

這一篇我們介紹Data Catalog(一種metadata 的管理服務)可以搜尋與管理在你的Google Cloud裡所有的資料。同時我們也會介紹DataPr...

技術 建置與維運GCP資料處理的Infrastructure

這一篇我們會介紹GCP託管的資料處理(運算資料)的服務,例如App engine, Cloud Functions, Dataflow. 如何使用GCP的監控機...

技術 Google Cloud 資料處理解決方案介紹

這一篇我們介紹如何運用GCP的infrastructure實現data engineering與機器學習,例如根據你的業務需求選擇適當的compute serv...

技術 設計Google Cloud的Data pipeline

這一篇我們會從設計模式的角度來看Data pipeline,外加一些其他不一樣的可供選擇的設計模式。同時我們也會介紹GCP有關於data pipeline服務,...

技術 建置與管理Google Cloud的儲存服務

這一篇我們介紹如何部署股哥的storage system與在這些系統上的資料運作,例如資料的匯出/匯入,設定存取控制,效能調較等。包含了Cloud SQL, C...

技術 Google Cloud的儲存服務介紹

這一篇我們會介紹根據你的業務需求來選擇適合的GCP的儲存服務。同時也介紹甚麼是結構化/半結構化/非結構化的資料模型;與設計SQL與NoSQL Database...

技術 BigQuery :: Reducing Storage Cost

簡單的幾個操作,降低 BigQuery 大筆的存儲費用!(理想情境中可以節省九成左右) BigQuery 的表格存儲一直以來都有很多項計費的模式,而主要分成兩...

技術 BigQuery :: Continuonus Query

BigQuery 近年來一直不斷擴充它功能的廣度,讓他遠遠不只是 Data Warehouse 這麼簡單,而是功能強大的 Data Platform(成本也越來...

鐵人賽 Kubernetes DAY 30

技術 Day30 GKE 異世界之旅後記

在此恭喜各位!經過這 30 天的 GKE 生存戰記系列文章,我們終於煉成GKE大師了! 前言 穿越到 GKE 異世界也到了第 30 天了,在 GKE 異世界...

鐵人賽 Kubernetes DAY 28

技術 Day28 在 GKE TPU 異世界中轉職為詠唱師:Gemma LLM 部署實戰

前言 前面幾篇文章介紹了 GKE Nvidia GPU 的應用,今天將要介紹一個特殊硬體 TPU 的應用。將引導您如何在 Google Kubernetes...

鐵人賽 Kubernetes DAY 21

技術 Day21 資源不夠使用了,調用一些魔力給它吧! Kueue(一)

前言 Kueue 是一個基於配額共享的作業排隊系統,用於管理配額以及作業如何使用配額,尤其適用於像機器學習模型訓練這類資源密集型的工作負載。Kueue 決定何...

鐵人賽 Kubernetes DAY 20

技術 Day20 Grafana + GCP OAuth API 一鍵登入數據聖殿

前言 在雲端原生應用盛行的今日,確保應用程式安全存取 Google Cloud Platform (GCP) 資源至關重要。OAuth 2.0 是一種業界標準...

鐵人賽 Kubernetes DAY 19

技術 Day19 GKE 共享的魔法卷軸(二):硬碟可以掛載的話,那 Cloud Storage 也可以嗎?

前言 本文將深入淺出地介紹如何在 GKE 集群中掛載 Google Cloud Storage (GCS),讓您的應用程式能輕鬆、安全地存取雲端儲存的資料。我...

鐵人賽 Kubernetes DAY 18

技術 Day18 GKE 共享的魔法卷軸(一):GKE NFS FileStore

前言 在 Kubernetes 環境中運行需要持久儲存的應用程式時,可靠且高效能的檔案儲存方案至關重要。Google Kubernetes Engine (G...

鐵人賽 Kubernetes DAY 14

技術 Day14 Kubernetes 安全遠程操控術(一):您的 Teleport 外送來了

前言 Kubernetes 的普及,讓管理多個叢集變得越來越複雜。Teleport 提供了一個統一的訪問平台,簡化了對分散式 Kubernetes 環境的管理...

鐵人賽 Kubernetes DAY 12

技術 Day12 今晚來點不一樣的證書 Cert-Manager

前言 前面已經介紹了 Google 代管的 GTS 證書管理工具,而今天要介紹的 Cert-Manager 是一款強大的 Kubernetes 工具,能自動執...

鐵人賽 Kubernetes DAY 11

技術 Day11 GKE Gateway API 輕鬆駕馭微服務流量

前言 上一章節講解了 Gateway API Http 沒有設定證書的方法。本章將延續介紹,將網關掛上 GTS 產出的 Wildcard 通用證書後,跨命名空...

鐵人賽 Kubernetes DAY 10

技術 Day10 Ingress 說再見!GKE Gateway API 開啟新紀元

前言 隨著雲原生應用程序的普及,入口流量管理的需求也在增加。Kubernetes 的 Ingress 控制器雖然可以滿足基本的入口流量需求,但是它存在一些限制...

鐵人賽 Kubernetes DAY 9

技術 Day9 告別網站危機 Google Trust Services 證書及External DNS

前言 SSL 證書的維護是所有 SRE 的必修課程,有 DV, OV, EV, Wildcard, Multi Domain, Self-Signed, 免費...

鐵人賽 生成式 AI DAY 24

技術 day24 探索 GCP Agent Builder Search:實現文件上傳與搜尋測試的智能搜尋體驗

前言 day22、23介紹各種雲端搜尋服務,今天我們正式的會去操作 AgentBuilder做為示範,用於之後串接我們的生成架構圖系統,會選擇AgentBuil...

鐵人賽 Kubernetes DAY 8

技術 Day8 Kubernetes 流量管理魔法棒 Nginx Ingress Controller

前言 昨天我們使用 GCP 雲原生負載均衡的 Ingress,將 Loadbalancer 建立在 GKE 之外,本章將介紹 K8s 最多人使用的 Ingre...

鐵人賽 Kubernetes DAY 7

技術 Day7 掌控流量入門 GKE NEG Service and Ingress

前言 在雲端的世界裡,Kubernetes 已經成為容器化應用部署的標準。而 Google Cloud Platform 的 Google Kubernete...

鐵人賽 生成式 AI DAY 23

技術 day23 RAG與雲端非向量搜尋服務:AWS Kendra與GCP AgentBuilder初探

前言 昨天我們介紹了AWS Bedrock Knowledge Bases和Azrue AI Search,這些都有提供將文件轉乘向量的功能,但是其實也有不轉成...

鐵人賽 DevOps DAY 6

技術 D6-制定求職計劃(2)

PART 1 心態建立:我一定能成功 D6-制定求職計劃(2) 章節目標 制定屬於自己的 求職計劃 ,邁向理想職缺! 今天的章節,我們要介紹 考取雲端證...

鐵人賽 Kubernetes DAY 6

技術 Day6 GKE 服務的一張身份證 GKE IAM Workload Identity

前言 在雲端環境中,安全一直是所有 SRE 至關重要的議題,每個雲服務都有不同的最佳權限控管方式,從 AWS 轉移至GCP 後嘗試了在 GKE 中使用各種方...

鐵人賽 Kubernetes DAY 5

技術 Day5 域名解析的利器 GCP Cloud DNS

前言 在使用 GCP 之前筆者都是使用 AWS 的 R53 及 Cloudflare 的 DNS Server,轉移至 GCP 之後,也一併將 DNS 統一至...

鐵人賽 Kubernetes DAY 4

技術 Day4 串連VPC的魔法陣 Cloud VPN

前言 在雲端世界中,跨越不同 VPC 的網路連線需求日益增加。Day2 有提到,位於不同 VPC 下的 GKE 較難使用 VPC Peering 的方式來連接...

鐵人賽 Kubernetes DAY 3

技術 Day3 Terraform 馭雲術:打造我的 GKE 容器帝國

前言 在現代雲端運算環境中,快速的部署和管理應用程式至關重要。目前公司所有的服務都運行在 GKE 上,當中分別有 Dev, Stage, Beta, Prod...

鐵人賽 Kubernetes DAY 2

技術 Day2 告別網路孤島 Shared VPC 打造安全連接

前言 GCP 相比於其他雲,多了 Project(專案) 層級,在規劃 GCP 架構時往往以環境來區分專案,在每個專案下都有各自獨立的 VPC,當規模越來越大...