AISatoshi (@AiXsatoshi)
무심코(무조작으로) LoRA를 적용하면 오히려 모델 성능이 떨어진다는 주장(가설)을 제시하고 있음. LoRA 적용·튜닝 시 주의가 필요하다는 지적.
https://x.com/AiXsatoshi/status/2033824432637284747
#lora #finetuning #modeloptimization #llm
無造作なLoraで性能落としてる説