oppo研究院和香港科技大学(广州)联合打造的othink-mr1,是一款先进的多模态语言模型优化框架。它通过动态调整kullback-leibler (kl) 散度策略 (grpo-d) 和奖励模型,显著提升了多模态模型在复杂任务中的泛化推理能力。在视觉计数和几何推理等基准测试中,othink-mr1超越了传统的监督微调 (sft) 方法,并展现出强大的跨任务适应性,为多模态模型的通用推理能力树立了新的标杆。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜
OThink-MR1核心功能:
OThink-MR1技术原理详解:
OThink-MR1的核心在于其动态KL散度策略 (GRPO-D) 和奖励模型。GRPO-D 借鉴了强化学习中的ϵ-greedy策略,在训练初期侧重探索,后期转向利用,从而避免陷入局部最优解。奖励模型则根据输出的准确性和格式规范性给予奖励,引导模型学习。强化学习机制则通过最大化奖励
函数,不断优化模型策略,最终提升性能。
OThink-MR1项目信息:
OThink-MR1应用前景:
OThink-MR1在诸多领域具有广阔的应用前景,例如: