搜索你想找的开源项目

输入名称、用途或关键词,也可粘贴 GitHub 仓库链接
全部技能

preference-optimization

用 DPO、ORPO、KTO 或 SimPO 方法,让微调模型符合偏好数据。