iT邦幫忙

0

使用LoRA去tune我的llama2遇到的問題

python3 llama2 lora
Ianto 2023-10-20 14:48:18 ‧ 879 瀏覽

  • 分享至 

  • xImage

我目前遇到一個問題，想來求助
我在使用LoRA去訓練我的llama2模型的時候，出現了這個問題，不知道大家有遇過嗎？!
https://ithelp.ithome.com.tw/upload/images/20231020/20164040LNG6YAgTC8.pnghttps://ithelp.ithome.com.tw/upload/images/20231020/20164040c5qM8tDtVg.png

登入發表討論
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

1 個回答

0
增廣建文
iT邦研究生 5 級 ‧ 2023-10-29 00:22:32

看起來是CUDA環境的設定有問題
或是單純不支援Windows而已

增廣建文 iT邦研究生 5 級 ‧ 2023-10-29 00:24:22 檢舉

補個Linux的解法:
https://github.com/TimDettmers/bitsandbytes/issues/305

登入發表回應

我要發表回答

立即登入回答
iThome鐵人賽
參賽組數
1064 組
團體組數
40 組
累計文章數
22198 篇
完賽人數
602 人
iT+看影片追技術 看影片追技術 看更多
熱門tag 看更多
15th鐵人賽 16th鐵人賽 13th鐵人賽 14th鐵人賽 12th鐵人賽 11th鐵人賽 鐵人賽 2019鐵人賽 javascript 2018鐵人賽 python 2017鐵人賽 windows php c# windows server linux css react vue.js
熱門問題
熱門回答
熱門文章
IT邦幫忙