Qwen/Qwen3.5-0.8B(revision 2fc06364715b967f1860aea9cf38778875588b17)を LoRA で追加学習し、元の重みにマージしたモデルです。 LLM講座2 2026 最終課題(RAG)の回答生成用です。モデルの構造は元のモデルと同じです(言語部分の重みだけを更新)。
LoRA r=16 alpha=32, lr=0.0001, epochs=1, 学習データ 883 件(内訳 {"auto_wiki_qa": 883})
Qwen/Qwen3.5-0.8B