[Maeumjigi 心語伴侶畢業專題開發日誌 #18] 推論產生 Token 擴容與第二輪微調 LoRA Alpha 效果對照
· 閱讀時間約 3 分鐘

在徹底修復昨天排查出的別名硬編碼缺陷後,5 月 13 日,我們終於重啟了第二輪微調大模型真實端到端的推論產生能力基準測試。

在徹底修復昨天排查出的別名硬編碼缺陷後,5 月 13 日,我們終於重啟了第二輪微調大模型真實端到端的推論產生能力基準測試。

5 月 6 日,歷經數個不眠之夜與超參數反覆調試,我們終於從漫長的微調泥潭中成功破局! 以 HCX-Omni-8B 與 Qwen35-9B 為代表的中輕量級垂直大模型全量微調順利收斂完工。