為什麼需要資料管理工具 隨著開發過程持續推進,通常會產生大量版本的程式碼,並需要使用版本控制工具追蹤這些程式碼,以利後續維護。除了程式碼,訓練資料也需要進行版本...
今天我們會使用 MLDM + MLDE 來進行貓狗圖片分類的卷積神經網路(Convolutional Neural Network,CNN)模型訓練,並進行以下...
過去在 DL 模型的開發過程中,要追蹤大量的資料和實驗結果可能需要結合多項工具,形成較高的學習成本;針對這些問題,HPE 推出 MLDM、MLDE 作為解決方案...
這幾天的文章主要分享三個頗受好評的模型實驗管理工具,市面上還有很多類似的工具,這些工具各有特色與強項,團隊可視情況選擇好維護的工具。 這些工具的目的都是在幫助團...
相較於 Tensorboard 與 Weight&Biases,MLflow 更著重於「公司內部的多人專案」的實驗管理上,主要讓工程師自己建立屬於公司內...
大致功能與 Tensorboard 相同,但是整合了更多的深度學習(Llamaindex、Langchain、HuggingFace…)與機器學習(Sciki...
Tensorboard 算是深度學習早期最著名的實驗管理工具,至今依然十分熱門,它主打幾個功能: 視覺化的方式呈現模型訓練的Loss曲線和評估指標 視覺化的方...
我們知道在做模型建立、模型驗證的時候需要思考以下幾個問題: 多人協作如何紀錄分析每位協作者的實驗紀錄,如何從眾多的實驗紀錄中快速比較出預測效果最好的模型? 當...
上傳資料到 Repository 先執行以下指令來將範例檔案 0050.csv 上傳到 Repository: (mldm) aif@aif % pachctl...
今天的文章將接續昨天的內容,說明具體來說,如何透過 HPE MLDM 讓資料前處理工作自動化,以及使用內建的版控功能,管理大量資料與前處理程式。 實作 接著我們...
為什麼我們需要資料版本控制? 在開發過程中,隨著時間的推移,團隊常常因為模型效能或其他考量,不斷更新訓練資料,最後累積出大量版本。想像一個情境:在增加一些訓練資...
歡迎來到我們 30 天 DevOps 挑戰的最後一天!給自己歡呼一下! 今天,就讓我們一起來回顧這段旅程,以及未來還有那些值得探索的技術吧~ 回顧整體挑戰過程...
在前一天的文章中,我們已經準備好了一個 Nginx 的靜態網站,並且完成了容器化。今天,我們將繼續練習將這個靜態網站佈署到 Kubernetes 叢集中,並且介...
不知不覺挑戰已經到了尾聲,在最後幾天的文章中,我們將要用前幾天學到的技能,從零開始建立一個 Nginx 的靜態網站,最終將其佈署到 Kubernetes 中。本...
在現代應用程式的開發和維運過程中,安全地處理包括 API 密鑰、資料庫憑證、OAuth token 等,敏感資訊變得非常重要。如果這些資訊被未經授權的用戶取得,...
在今天的文章中,我們將深入探討 DevSecOps 的概念,以及如何將安全性策略整合到 DevOps 流程中。隨著現代應用的快速迭代和佈署,安全性已經成為 De...
目錄 目錄 摘要 一般workflow reusable workflow & composite action marketpla...
昨天介紹完 Ansible 的重要元件,今天來簡單的實作。 安裝 pip install ansible 確認安裝成功 ansible --version a...
在今天的文章中,我們將探討 Infrastructure as Code (IaC) 的概念,並了解它在現代 DevOps 實踐中的核心角色。隨著應用程式維運與...
今天來介紹一下常在公司使用來部署 code 到 prod 的工具 Ansible! What is Ansible Ansible is an open sou...
最終章:建立你的職場人生觀 D32-職場之路:職場走過的人生觀 章節目標 建立屬於 你自己的職場人生觀 每次的職場轉換都是一次賭注,不要 後悔自己的選擇...
PART 4 面試技巧:展現最好的自己 D31-不同職業的技術面試題-DevOps-SRE工程師(2) 章節目標 快速了解 DevOps-SRE工程師 技術...
PART 4 面試技巧:展現最好的自己 D30-不同職業的技術面試題-DevOps-SRE工程師(1) 章節目標 快速了解 DevOps-SRE工程師 技術...
PART 4 面試技巧:展現最好的自己 D29-不同職業的技術面試題-System Admin系統管理員-MIS資訊系統工程師(2) 章節目標 快速了解 S...
PART 4 面試技巧:展現最好的自己 D28-不同職業的技術面試題-System Admin系統管理員-MIS資訊系統工程師(1) 章節目標 快速了解 S...
PART 4 面試技巧:展現最好的自己 D27-不同職業的技術面試題-Cloud Engineer雲端工程師(2) 章節目標 快速了解 Cloud Engi...
目錄 目錄 摘要 Jenkins的組成 例子 其他語法 例子 摘要 在上一篇我們比較了Github Action...
b# PART 4 面試技巧:展現最好的自己 D25-技術面試問題的分類 章節目標 技術面試 是門硬功夫,怎樣有效準備是重點! 技術面試通常涵蓋多個方面...
PART 4 面試技巧:展現最好的自己 D26-不同職業的技術面試題-Cloud Engineer雲端工程師(1) 章節目標 快速了解 Cloud Engi...
PART 4 面試技巧:展現最好的自己 D24-你是面試官,你在意的是? 章節目標 面試官最在意的是 你能不能為公司帶來價值 ? 面試絕對要嘗試換位思考...