Models

372
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_8_merged

0
·
22
·
Mar 2026
3B32Kqwen25-3b
Warm

CriteriaPO/qwen2.5-3b-dpo-vanilla

0
·
20
·
May 2025
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_MoE_sft3_dpo_merged

0
·
20
·
Feb 2026
8B32Kllama31-8b
Warm

Magpie-Align/MagpieLM-8B-Chat-v0.1

23
·
19
·
Sep 2024
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_5_merged

0
·
18
·
Feb 2026
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_9_merged

0
·
18
·
Mar 2026
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_13_merged

0
·
18
·
Mar 2026
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_14_merged

0
·
18
·
Mar 2026
8B8Kllama3-8b
Warm

Muhammad2003/Llama3-8B-OpenHermes-DPO

10
·
17
·
Apr 2024
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_11_merged

0
·
17
·
Mar 2026
8B8Kllama3-8b
Warm

Magpie-Align/Llama-3-8B-Magpie-Align-v0.1

10
·
16
·
Jun 2024
8B32Kqwen25-7b
Warm

lightblue/Karasu-DPO-7B

4
·
16
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_6_merged

0
·
16
·
Feb 2026
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_10_merged

0
·
16
·
Mar 2026
3B32Kllama32-3b
Warm

wololoo/Llama-3.2-3B-TR-Instruct-DPO

2
·
15
·
Jan 2026
4B32Kqwen3-4b
Warm

SKOTK/dpo-qwen-cot-merged

0
·
15
·
Feb 2026
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_w_merged

0
·
15
·
Feb 2026
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_2_merged

0
·
15
·
Feb 2026
4B32Kqwen3-4b
Warm

motobrew/qwen-dpo-v3

0
·
15
·
Feb 2026
4B32Kqwen3-4b
Warm

Hi-Satoh/adv_sft_dpo_final_3_merged

0
·
15
·
Feb 2026