2023 iThome 鐵人賽
分享至
我看了一陣子以後,發現LLama與LLama2有太多不一樣的細節,對我這樣剛切入了人來說,條列區別意義不大,因此決定先跑起來再說。
目前目標放在部屬Chinese-Alpaca-2-7B到本機上執行:
如何執行可以參考 alpaca-2-7b.md
對話類任務使用scripts/llama-cpp/chat.sh:
scripts/llama-cpp/chat.sh
非對話類任務使用scripts/inference/inference_hf.p:
scripts/inference/inference_hf.p
具體使用細節明天補上
IT邦幫忙