IT EXPLAINED 數位轉型攻略 VII
2025臺灣資安大會 Keynote講者陣容
Cloud Future Built Today
技術問答
技術文章
iT 徵才
Tag
聊天室
2024 鐵人賽
登入/註冊
問答
文章
Tag
邦友
鐵人賽
搜尋
2023 iThome 鐵人賽
DAY
29
0
自我挑戰組
30天從零開始學習NLP(自然語言處理)
系列 第
29
篇
Day 29 - NER 模型檔案內容
15th鐵人賽
ner模型
模型檔案
huggingface
肉彈
2023-10-14 16:30:51
441 瀏覽
分享至
這篇我使用我之前上傳到 Hugging Face 的模型檔案來解說,那因為在模型訓練那部份我沒講到要如何上傳模型,因此等鐵人賽結束後我會再補充回去。
介紹兩個重要的部分 (先來說最重要的)
files : 模型的檔案
README.md:README 文件包含了模型的基本資訊,有關模型的描述性文件。
config.json:包含了有關模型配置的 JSON 檔案。它描述了模型的架構、超參數和其他配置資訊。
pytorch_model.bin:這是 PyTorch 模型的二進位權重文件,包含了訓練完成的模型參數。
special_tokens_map.json:這個 JSON 檔案描述了特殊標記(如[PAD]、[CLS]、[SEP]等)的映射和設定資訊。
tokenizer.json:此 JSON 檔案包含了有關標記器(tokenizer)的配置信息,用於將文字轉換為模型的輸入格式。
tokenizer_config.json:這個 JSON 檔案也包含有關標記器(tokenizer)的設定信息,通常與tokenizer.json檔案相關。
Training_args.bin:二進位訓練文件,包含訓練參數和訓練過程的配置資訊。它可以用於還原模型的設定。
vocab.txt:此文字檔案包含了模型訓練的詞彙表,包括模型期間遇到的所有詞彙。
但這些全部的檔案內容我們在使用時也會全部一起載入,基本上也不用太深入地去理解
Model card
在預設不去更動 Model card 的情況下,他會包含以下內容
模型的分數和效能等分數
訓練參數
訓練的過程
一些套件的版本
簡易的API
(這是我覺得最棒的地方,他這裡就可以直接試用看看模型的結果)
,下面的句子範例事之前訓練品牌和物品兩種的模型
參考資料
https://huggingface.co/davidliu1110/bert-base-chinese-david-ner/tree/main
留言
追蹤
檢舉
上一篇
Day 28 - NER 模型評估和驗證
下一篇
Day 30 - 建立 Gradio Demo App
系列文
30天從零開始學習NLP(自然語言處理)
共
30
篇
目錄
RSS系列文
訂閱系列文
5
人訂閱
26
Day 26 - NER 模型訓練 (1)
27
Day 27 - NER 模型訓練 (2)
28
Day 28 - NER 模型評估和驗證
29
Day 29 - NER 模型檔案內容
30
Day 30 - 建立 Gradio Demo App
完整目錄
尚未有邦友留言
立即登入留言
iThome鐵人賽
參賽組數
1064
組
團體組數
40
組
累計文章數
22206
篇
完賽人數
600
人
看影片追技術
看更多
使用 kubernetes 微服務化 AI 教育平台 PAIA
Cloud Summit 臺灣雲端大會
|
28 分
利用 Ruckus IoT 技術,輕鬆數位轉型邁向智慧企業
IT EXPLAINED
|
41 分
小公司導入 ISO27001 的辛酸血淚史
MWC
|
37 分
2022 CipherTech 亞利安科技 Solution Day 議程 — 資料庫安全防護,金鑰管理、加密、代碼化
CipherTech 亞利安科技
|
34 分
資安防禦零死角!勒索軟體說掰掰!
IT EXPLAINED
|
42 分
勒索病毒終極防線 自動偵測以鞏固企業內部資料安全
臺灣資安大會
|
30 分
金融業於雲端轉型過程中應用系統大規模上雲策略
Cloud Summit 臺灣雲端大會
|
26 分
導入DataOps沒想像中這麼難:大型媒體公司經驗談
DevOpsDays
|
43 分
深入淺出 Kubernetes
Kubernetes Summit
|
44 分
Greenplum gpfdist - PB 級 ETL 獨門秘器|歐立威科技
歐立威科技
|
50 分
熱門tag
看更多
15th鐵人賽
16th鐵人賽
13th鐵人賽
14th鐵人賽
12th鐵人賽
11th鐵人賽
鐵人賽
2019鐵人賽
javascript
2018鐵人賽
python
2017鐵人賽
windows
php
c#
windows server
linux
css
react
vue.js
熱門問題
鼎新EasyFlow.NET 維護合約
關於AP分享器的設定
Excel 無徵兆無回應
這題程式設計我解很長一段時間但都解不開
請問要如何關掉 Microsoft Teams 與 OneDrive 的關連?
SQL Server JOIN問題
使用viewmodel背景更新RecyclerView的API數據列表,但是notifyDataSetChanged()無動作問題
今年要考CKA
Blender剪片無法正確使用
關於備份 3-2-1 原則
全新登場!CYBERSEC ARENA:War Game遊戲中體驗資安威脅應對,提升戰略思維與決策力!
GenAI 加速企業創新落地,更需要全新 IT 戰略
Windows 10支援倒數,聯繫微軟夥伴諮詢
DevOpsDays Taipei 2025 論壇議程搶先看!帶您掌握最新技術趨勢、提升實戰技能
【免費線上報名即將額滿】4/8 18:00 截止,現場報名將收費,錯過不再免費!
立即標記行事曆,7/2 探索 AI 與雲端的無限未來!
熱門回答
Fortigate 60E升級60F,設定檔通用嗎?
Excel 無徵兆無回應
關於AP分享器的設定
鼎新EasyFlow.NET 維護合約
SQL Server JOIN問題
熱門文章
[超實用教學]教你4個一鍵下載YouTube音樂的技巧
[日期轉換]客戶希望用民國年顯示很厭世嗎? 登登!!自製民國年選擇器!!!!!
為什麼機器人的研究都做強化學習?
Python Discord Bot 實作筆記
ML DEBUG記事本
×
標記使用者
輸入對方的帳號或暱稱
Loading
找不到結果。
標記
{{ result.label }}
{{ result.account }}