T^2PO:不确定性引导探索控制,提升多轮智能体强化学习稳定性
T^2PO: Uncertainty-Guided Exploration Control for Stable Multi-Turn Agentic Reinforcement Learning
Haixin Wang, Hejie Cui, Chenwei Zhang, Xin Liu, Shuowei Jin, 等 (+5)
• T²PO(Token和Turn级策略优化)是一种新颖方法,旨在解决多轮智能体强化学习中常见的探索不稳定性问题。
• 该方法通过在Token和Turn等细粒度级别上,精确控制智能体的探索行为,从而显著提升学习过程的稳定性。
• 其核心机制在于结合了不确定性监控技术,并辅以动态重采样策略,以有效地引导探索过程,避免智能体陷入次优解或学习崩溃。
🔗 arXiv · 🤗 HF
#强化学习 #智能体 #探索控制 #不确定性 #多轮学习 #策略优化
T^2PO: Uncertainty-Guided Exploration Control for Stable Multi-Turn Agentic Reinforcement Learning
Haixin Wang, Hejie Cui, Chenwei Zhang, Xin Liu, Shuowei Jin, 等 (+5)
• T²PO(Token和Turn级策略优化)是一种新颖方法,旨在解决多轮智能体强化学习中常见的探索不稳定性问题。
• 该方法通过在Token和Turn等细粒度级别上,精确控制智能体的探索行为,从而显著提升学习过程的稳定性。
• 其核心机制在于结合了不确定性监控技术,并辅以动态重采样策略,以有效地引导探索过程,避免智能体陷入次优解或学习崩溃。
🔗 arXiv · 🤗 HF
#强化学习 #智能体 #探索控制 #不确定性 #多轮学习 #策略优化