达到最优:强化学习用于可证明最优的四边形块分解
摘要
本文提出了一种强化学习代理,用于生成平面区域的可证明最优四边形块分解,展示了在可用性和最优性方面优于现有工具如Gmsh的性能。
查看缓存全文
缓存时间: 2026/09/29 12:10
论文页面 - 追平标准:实现可证明最优四边形块分解的强化学习
来源:https://huggingface.co/papers/2609.32146
摘要
平面区域的四边形块分解需通过完整性、元素形状质量以及不规则顶点数量来评判。其中不规则顶点数存在可证明的下限:离散高斯-博内恒等式基于区域的拓扑结构和角点角度,为任意全四边形网格的总体顶点不规则性设定了下界。我们训练一个强化学习智能体来构建达到该下界的分解(我们称之为“标准“)。它通过局部编辑直接作用于网格的半边数据结构,其策略网络的卷积操作遵循网格自身的连接方式,因此能应用于训练中未见过的更大区域。奖励函数直接针对该下界,且为稀疏奖励:随机操作在超过八条边的区域上均无法达到标准。我们通过在易于构造的最优网格上进行行为克隆(反向回溯生成示范轨迹),再使用PPO算法训练,克服了这一探索障碍。在96个留出测试区域上,智能体在所有区域生成了全四边形网格,其中95.7%可用,90%达到可证明最优;而Gmsh在相同元素数量下的最强配置仅完成51个区域网格,38个可用,无一最优;即使使用3到14倍元素数量,其生成的网格规则性也未超过本方法。在64个训练规模两倍大的区域上,智能体完成所有网格,62个可用,与Gmsh在相同元素数下的39个相比,超出标准的中位数始终低于1。
查看 arXiv 页面 (https://arxiv.org/abs/2609.32146)
查看 PDF (https://arxiv.org/pdf/2609.32146)
项目主页 (https://arjunnarayanan.github.io/par-quad/)
GitHub (https://github.com/ArjunNarayanan/par-quad)
添加到收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2609.32146)
在智能体中获取本文:
hf papers read 2609.32146
没有最新CLI?运行:curl -LsSf https://hf.co/cli/install.sh | bash
引用本文的模型 0
无关联本文的模型
在模型README.md中引用 arxiv.org/abs/2609.32146 即可从本页链接。
引用本文的数据集 0
无关联本文的数据集
在数据集README.md中引用 arxiv.org/abs/2609.32146 即可从本页链接。
引用本文的Spaces 0
无关联本文的Space
在Space README.md中引用 arxiv.org/abs/2609.32146 即可从本页链接。
包含本文的收藏夹 0
无包含本文的收藏夹
将本文添加到收藏夹 (https://huggingface.co/new-collection) 即可从本页链接。
相似文章
基于强化学习与可验证奖励的LLM生成式楼层平面设计
本文介绍了一种基于文本的生成式楼层平面设计方法,该方法通过强化学习与可验证奖励对大语言模型进行微调,以提高对拓扑和数值约束的遵循程度,与现有方法相比取得了显著改进。
通过自我对弈发现格基约简策略
本文提出Delta-Star,一种采用AlphaZero风格自我对弈的深度强化学习方法,通过与LLL算法的原始操作交互,发现更优的格基约简策略。学习到的策略无需重新训练即可泛化到更高维度和未见过的模数。
深度强化学习掌握Baghchal的不对称策略
本文系统地探索了四种深度强化学习解决方案(DQN、REINFORCE、PPO和MuZero)用于尼泊尔不对称棋盘游戏Baghchal,发现MuZero由于通过蒙特卡洛树搜索进行基于模型的规划,获得了最佳胜率。
代码优化的强化学习
本文针对使用强化学习进行代码优化时面临的挑战,提出了三个阶段:通过DMC-Optim改进测试方法;通过正确性与速度组合以及离线模拟器将执行时间转化为奖励;以及调整GRPO以适应含噪时序奖励。该方法在代码优化基准测试中取得了显著提升。
基于规划器的深度研究强化学习框架:结构感知奖励
DecomposeR 提出了一种以规划器为中心的强化学习框架,将研究计划表示为类型化的有向无环图(DAG),从而实现对深度研究任务中规划与执行的细粒度优化,在开源基线基础上提升 5.1–8.0 个点。