本研究提出了一种新的信任区域偏好近似（TRPA）算法，旨在解决偏好优化算法在推理任务中的不足。TRPA结合了规则基优化与偏好基优化，消除了奖励黑客问题，并在推理任务中展现出竞争力和稳定性，具有显著的应用潜力。