从纯概率视角看Hamiltonian Monte Carlo的笔记 [P]

Reddit r/MachineLearning 论文

摘要

作者分享了从概率视角解释Hamiltonian Monte Carlo (HMC)的笔记,以增强理解,而不依赖于基于物理的动机。

我一直在学习Hamiltonian Monte Carlo,并写了一组笔记来解释HMC,而不依赖于通常的基于物理的动机。这些笔记从概率/MCMC视角发展HMC,从引入辅助变量、构建相应的马尔可夫链开始,然后涵盖哈密顿动力学、蛙跳积分、可逆性和体积保持。目标是理解HMC为什么有效,而不是将物理类比作为前提。我在此分享这些笔记,以防它们对其他学习HMC的人有帮助。我也非常欢迎任何反馈,特别是如果您发现错误或阐述可以改进的地方。https://doi.org/10.5281/zenodo.21841087
查看原文

相似文章

从微分几何视角看哈密顿神经网络

Reddit r/artificial

一篇博客文章,通过微分几何解释哈密顿神经网络,使用简单的质量-弹簧系统演示如何通过网络架构施加守恒定律以实现更高效的学习。作者从基础微积分开始逐步构建了辛流形和泊松括号等数学工具。

使用端口-哈密顿神经网络识别非线性弦动力学

arXiv cs.LG

本文扩展了端口-哈密顿神经网络(PHNNs)到偏微分方程(PDEs)中,用于从数据中学习非线性弦动力学。该方法能够同时恢复哈密顿量和耗散,在准确性和可解释性方面优于非物理信息基线方法。