Llama3.2-1B-DPO-LoRA — LLM for Productivity | Genaihub