ML 模型需要更好的训练数据:GenAI 解决方案

我们对金融市场的理解本质上受到历史经验的限制——在无数可能展开的情景中,只实现了一个单一的时间线。每个市场周期、地缘政治事件或政策决定都只是潜在结果的一种表现形式。

训练机器学习(ML)模型时,这一限制尤为明显,因为模型可能会无意中从历史遗迹中学习,而不是学习底层的市场动态。随着复杂 ML 模型在资产管理中的普及,它们倾向于过度拟合特定的历史条件,这给投资结果带来了越来越大的风险。

生成式 AI 生成的数据(GenAI 生成数据)正在成为应对这一挑战的潜在解决方案。虽然生成式 AI 主要因其在自然语言处理方面的关注而受到关注,但其生成复杂生成数据的能力可能对量化投资过程更为重要。通过创建能够有效代表“平行时间线”的数据,这种方法可以被设计和工程化,以提供更丰富的训练数据集,同时保留关键的市场关系并探索反事实情景。

ML 模型需要更好的训练数据:GenAI 解决方案

挑战:超越单一时间线训练

传统的量化模型存在一个固有的局限性:它们仅从导致当前状况的单一历史事件序列中学习。这产生了我们称之为“经验性偏差”的问题。随着复杂机器学习模型的学习能力使其能够学习复杂的模式,它们在有限的历史数据上过度拟合的问题变得更加突出。一种替代方法是考虑反事实情景:如果某些可能任意的事件、决策或冲击以不同的方式展开,这些情景可能会发生

为了说明这些概念,考虑 MSCI EAFE 基准的活跃国际股票投资组合。图 1 展示了过去五年(截至 2025 年 1 月 31 日)多个投资组合的表现特征——上行捕捉、下行捕捉以及整体相对回报。

图 1:经验数据。EAFE 基准投资组合,截至 2025 年 1 月 31 日的五年表现特征。

ML 模型需要更好的训练数据:GenAI 解决方案

这个经验数据集仅仅代表了可能的投资组合的一小部分,而如果事件发展不同,潜在的结果样本会更小。传统上扩展这个数据集的方法存在显著的局限性。

图 2.基于实例的方法:K 最近邻(左),SMOTE(右)。

ML 模型需要更好的训练数据:GenAI 解决方案

传统合成数据:理解限制

常规的合成数据生成方法试图解决数据限制问题,但往往无法捕捉金融市场的复杂动态。以我们的 EAFE 投资组合为例,我们可以考察不同方法的表现:

基于实例的方法,如 K-NN 和 SMOTE 通过局部采样扩展现有数据模式,但从根本上仍然受限于观察到的数据关系。它们无法生成远超出训练示例的场景,限制了它们对未来市场条件的理解能力。

图 3:更具灵活性的方法通常能改善结果,但难以捕捉复杂的市场关系:GMM(左),KDE(右)。

ML 模型需要更好的训练数据:GenAI 解决方案

无论是通过实例方法还是密度估计的传统合成数据生成方法都存在根本性的局限性。虽然这些方法可以逐步扩展模式,但它们无法生成保留复杂相互关系的同时探索真正不同的市场条件的现实市场情景。当我们研究密度估计方法时,这一点尤为明显。

如 GMM 和 KDE 这样的密度估计方法在扩展数据模式方面更具灵活性,但仍难以捕捉金融市场的复杂、相互关联的动力。这些方法在制度变化期间尤其难以应对,因为历史关系可能会发生变化。

Recent 研究在城市圣乔治和华威大学进行,并在纽约大学 ACM 国际金融人工智能会议上(ICAIF)展示,表明生成式 AI 可能更好地逼近市场的数据生成函数。通过神经网络架构,这种方法旨在学习条件分布同时保留持久的市场关系。

研究与政策中心(RPC)即将发布一份报告,该报告将定义合成数据,并概述可用于创建它的生成 AI 方法。该报告将强调评估合成数据质量的最佳方法,并引用现有的学术文献来突出潜在的应用场景。

图 4:展示了 GenAI 合成数据如何扩展现实可能结果的空间,同时保持关键关系。

ML 模型需要更好的训练数据:GenAI 解决方案

这种合成数据生成的方法可以扩展以提供几个潜在的优势:

  • 扩展训练集: 对有限的金融数据集进行现实增强
  • 情景探索: 生成合理的市场条件,同时保持持久的关系
  • 尾事件分析: 创建多种但现实的压测情景

如图 4 所示,GenAI 合成数据方法旨在扩展可能的投资组合绩效特征的空间,同时尊重基本的市场关系和现实的边界。这为机器学习模型提供了更丰富的训练环境,可能减少其对历史伪影的脆弱性,并提高其在不同市场条件下泛化的能力。

在证券选择中的应用

对于特别容易学习虚假历史模式的股票选择模型而言,GenAI 合成数据提供了三个潜在的好处:

  1. 减少过拟合 : 通过在各种市场条件下进行训练,模型可能更好地区分持久信号和暂时的伪影。
  2. 增强尾部风险管理: 训练数据中包含更多样化的场景可能在市场压力期间提高模型的稳健性。
  3. 更好的泛化能力: 保持现实市场关系的扩展训练数据可能有助于模型适应不断变化的条件。

有效实施 GenAI 合成数据生成本身也带来了技术挑战,这些挑战可能比投资模型本身还要复杂。然而,我们的研究表明,成功应对这些挑战可以通过更稳健的模型训练显著提高风险调整后的回报。

GenAI 通往更好模型训练的道路

GenAI 合成数据有可能为投资和风险模型提供更强大的前瞻性洞察。通过基于神经网络的架构,它旨在更好地逼近市场的数据生成函数,从而可能更准确地代表未来市场条件,同时保持持久的相互关系。

尽管这可以惠及大多数投资和风险模型,但其之所以现在被视为一项重要的创新,关键原因在于机器学习在投资管理中的日益普及以及由此带来的过度拟合风险。GenAI 合成数据可以生成可信的市场情景,同时保持复杂关系并探索不同的条件。这项技术为更稳健的投资模型提供了途径。

然而,即使是最先进的合成数据也无法弥补简单的机器学习实现。对于过度复杂性、不透明模型或薄弱的投资理由,没有安全的解决方案。

韭菜热线原创版权所有,发布者:风生水起,转载请注明出处:https://www.9crx.com/90313.html

(0)
打赏
风生水起的头像风生水起普通用户
上一篇 2025年7月15日 22:34
下一篇 2025年7月21日 22:06

相关推荐

  • Needham 表示,苹果面临着被更大的人工智能公司超越的风险

    作者:Ryan Vlastelica 尼达姆表示,苹果公司是迄今为止世界上最大的公司,但人工智能的趋势有望颠覆华尔街的实力排名。 分析师劳拉·马丁 (Laura Martin) 在周四的一份报告中写道,这家 iPhone 制造商缺乏生成人工智能和大型语言模型 (LLM) 的战略(为 ChatGPT 等服务提供支持),使其头衔面临风险。人工智能的增长可能会导致…

    2023年9月24日
    19100
  • Parrot 是一种将语音转换为文本的人工智能转录平台,筹集了 1100 万美元的 A 系列资金

    Parrot 的首席执行官 Aaron O’Brien 在科技领域工作了超过 15 年,之前曾在 Flexport、Uber 和 Facebook 等科技公司工作过,他告诉 TechCrunch,Parrot 的创始 团队看到了一个机会,可以将急需的技术带到 长期被忽视和服务不足的法律行业。

    2023年6月20日
    15900
  • 核电:人工智能时代数据中心的游戏规则改变者

    核电:人工智能时代数据中心的变革者 作者:美国Frank Holmes,2024 年 10 月 21 日 联合航空宣布了一项 15 亿美元的股票回购计划,这是该公司自 2020 年以来首次实施该计划,此后该公司股价本周飙升。该股周三收盘上涨逾 12%,成为当日表现最好的标普 500 指数股票。 我认为美联航的回购计划非常有意义。首先,它凸显了高管对公司未来增…

    2024年10月28日
    21800
  • Claude 2 的创造者 Anthropic 正努力成为一家安全第一的人工智能公司

    科学家们希望人工智能对他们撒谎。 Anthropic 的研究科学家 Evan Hubinger 在旧金山市中心办公室的会议室里向这家人工智能初创公司的“协调”团队成员描述了该项目的目标。协调意味着确保像 Anthropic 这样的公司制造的人工智能系统实际上能够按照人类的要求进行操作,而正确地做到这一点是当今人工智能研究人员面临的最重要的挑战之一。 Hubi…

    2023年8月28日
    38600
  • 人工智能、脱碳与 2026 年政策顺风

    作者:Charles Hamieh、Shane Hurst、Nick Langley,ClearBridge Investments,2025 年 12 月 12 日 主要要点 人工智能(AI)和数据中心的爆炸式增长推动了前所未有的电力和天然气需求,促使公用事业公司在智能电网、可靠性和效率上投入大量资金。 结构性顺风,如脱碳、网络升级和气候防护,正在推动长期…

    2026年1月9日
    2400
客服
客服
关注订阅号
关注订阅号
分享本页
返回顶部