Llama-3.2-1B-Instruct-SFT-D_chosen-pref-mix7.Q4_K.gguf
Llama-3.2-1B-Instruct-SFT-D_chosen-pref-mix7.Q4_K_M.gguf