Llama-3.2-3B-DPO-merged — LLM for Productivity | Genaihub