标签
本文提出了一种基于预训练Transformer的基础模型，该模型对金融应用中的多模态事件序列进行训练，统一了异构数据源，并通过下一事件预测学习通用表示。该方法优于传统的任务专用模型，并已在东欧一家大型银行部署，带来了可衡量的业务改进。