Llama-3.2-1B-Instruct-SFT-D_chosen-pref-mix8.Q4_K.gguf
Llama-3.2-1B-Instruct-SFT-D_chosen-pref-mix8.Q4_K_M.gguf