LoRA(Low-Rank Adaptation)は、LLMの元の重みを固定したまま、下流のパラメータだけを学習に用いる方法です。モデル全体を学習し直さないので、少ないメモリと短い時間で、モデルを特定のタスクに適合することができます。
続きはこちらから。

LoRA(Low-Rank Adaptation)は、LLMの元の重みを固定したまま、下流のパラメータだけを学習に用いる方法です。モデル全体を学習し直さないので、少ないメモリと短い時間で、モデルを特定のタスクに適合することができます。
続きはこちらから。
