iT邦幫忙

2023 iThome 鐵人賽

DAY 24
0
AI & Data

利用 Databricks 學習 ML/LLM 開發系列 第 24

Day24 - Databricks 上 LLMs 和 Generative AI Application 的使用

  • 分享至 

  • xImage
  •  

接下來會透過兩個面向來看 Databricks:

Databricks Runtime for Machine Learning

根據官方文件說明,Databricks Runtime for Machine Learning 包含了 Hugging Face TransformersLangChain 這兩個函式庫,可以讓你整合現有的預訓練模型或其他開源函式庫到你的工作流程中。Databricks MLflow integration 讓你可以很容易的使用 MLflow tracking service 來追蹤 transformer pipelines、模型和處理元件。

Large Language Models (LLMs) Operation - LLMOps

Databricks 可以讓你在自己的資料上訓練 LLM,並且可以透過 Hugging Face 和 DeepSpeed 這兩個開源工具來提升效率,最後可以在 Generative AI Application 上使用 Custom LLMs。

下一篇會透過一個官方的範例來看看如何使用 Databricks 做 LLMOps。

Reference:


上一篇
Day23 - 從範例程式來檢視 DataBricks Machine Learning Part2
下一篇
Day25 - 如何使用 Databricks 做 LLMOps
系列文
利用 Databricks 學習 ML/LLM 開發30
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言