ML 模型需要更好的训练数据:GenAI 解决方案

我们对金融市场的理解本质上受到历史经验的限制——在无数可能展开的情景中,只实现了一个单一的时间线。每个市场周期、地缘政治事件或政策决定都只是潜在结果的一种表现形式。

训练机器学习(ML)模型时,这一限制尤为明显,因为模型可能会无意中从历史遗迹中学习,而不是学习底层的市场动态。随着复杂 ML 模型在资产管理中的普及,它们倾向于过度拟合特定的历史条件,这给投资结果带来了越来越大的风险。

生成式 AI 生成的数据(GenAI 生成数据)正在成为应对这一挑战的潜在解决方案。虽然生成式 AI 主要因其在自然语言处理方面的关注而受到关注,但其生成复杂生成数据的能力可能对量化投资过程更为重要。通过创建能够有效代表“平行时间线”的数据,这种方法可以被设计和工程化,以提供更丰富的训练数据集,同时保留关键的市场关系并探索反事实情景。

ML 模型需要更好的训练数据:GenAI 解决方案

挑战:超越单一时间线训练

传统的量化模型存在一个固有的局限性:它们仅从导致当前状况的单一历史事件序列中学习。这产生了我们称之为“经验性偏差”的问题。随着复杂机器学习模型的学习能力使其能够学习复杂的模式,它们在有限的历史数据上过度拟合的问题变得更加突出。一种替代方法是考虑反事实情景:如果某些可能任意的事件、决策或冲击以不同的方式展开,这些情景可能会发生

为了说明这些概念,考虑 MSCI EAFE 基准的活跃国际股票投资组合。图 1 展示了过去五年(截至 2025 年 1 月 31 日)多个投资组合的表现特征——上行捕捉、下行捕捉以及整体相对回报。

图 1:经验数据。EAFE 基准投资组合,截至 2025 年 1 月 31 日的五年表现特征。

ML 模型需要更好的训练数据:GenAI 解决方案

这个经验数据集仅仅代表了可能的投资组合的一小部分,而如果事件发展不同,潜在的结果样本会更小。传统上扩展这个数据集的方法存在显著的局限性。

图 2.基于实例的方法:K 最近邻(左),SMOTE(右)。

ML 模型需要更好的训练数据:GenAI 解决方案

传统合成数据:理解限制

常规的合成数据生成方法试图解决数据限制问题,但往往无法捕捉金融市场的复杂动态。以我们的 EAFE 投资组合为例,我们可以考察不同方法的表现:

基于实例的方法,如 K-NN 和 SMOTE 通过局部采样扩展现有数据模式,但从根本上仍然受限于观察到的数据关系。它们无法生成远超出训练示例的场景,限制了它们对未来市场条件的理解能力。

图 3:更具灵活性的方法通常能改善结果,但难以捕捉复杂的市场关系:GMM(左),KDE(右)。

ML 模型需要更好的训练数据:GenAI 解决方案

无论是通过实例方法还是密度估计的传统合成数据生成方法都存在根本性的局限性。虽然这些方法可以逐步扩展模式,但它们无法生成保留复杂相互关系的同时探索真正不同的市场条件的现实市场情景。当我们研究密度估计方法时,这一点尤为明显。

如 GMM 和 KDE 这样的密度估计方法在扩展数据模式方面更具灵活性,但仍难以捕捉金融市场的复杂、相互关联的动力。这些方法在制度变化期间尤其难以应对,因为历史关系可能会发生变化。

Recent 研究在城市圣乔治和华威大学进行,并在纽约大学 ACM 国际金融人工智能会议上(ICAIF)展示,表明生成式 AI 可能更好地逼近市场的数据生成函数。通过神经网络架构,这种方法旨在学习条件分布同时保留持久的市场关系。

研究与政策中心(RPC)即将发布一份报告,该报告将定义合成数据,并概述可用于创建它的生成 AI 方法。该报告将强调评估合成数据质量的最佳方法,并引用现有的学术文献来突出潜在的应用场景。

图 4:展示了 GenAI 合成数据如何扩展现实可能结果的空间,同时保持关键关系。

ML 模型需要更好的训练数据:GenAI 解决方案

这种合成数据生成的方法可以扩展以提供几个潜在的优势:

  • 扩展训练集: 对有限的金融数据集进行现实增强
  • 情景探索: 生成合理的市场条件,同时保持持久的关系
  • 尾事件分析: 创建多种但现实的压测情景

如图 4 所示,GenAI 合成数据方法旨在扩展可能的投资组合绩效特征的空间,同时尊重基本的市场关系和现实的边界。这为机器学习模型提供了更丰富的训练环境,可能减少其对历史伪影的脆弱性,并提高其在不同市场条件下泛化的能力。

在证券选择中的应用

对于特别容易学习虚假历史模式的股票选择模型而言,GenAI 合成数据提供了三个潜在的好处:

  1. 减少过拟合 : 通过在各种市场条件下进行训练,模型可能更好地区分持久信号和暂时的伪影。
  2. 增强尾部风险管理: 训练数据中包含更多样化的场景可能在市场压力期间提高模型的稳健性。
  3. 更好的泛化能力: 保持现实市场关系的扩展训练数据可能有助于模型适应不断变化的条件。

有效实施 GenAI 合成数据生成本身也带来了技术挑战,这些挑战可能比投资模型本身还要复杂。然而,我们的研究表明,成功应对这些挑战可以通过更稳健的模型训练显著提高风险调整后的回报。

GenAI 通往更好模型训练的道路

GenAI 合成数据有可能为投资和风险模型提供更强大的前瞻性洞察。通过基于神经网络的架构,它旨在更好地逼近市场的数据生成函数,从而可能更准确地代表未来市场条件,同时保持持久的相互关系。

尽管这可以惠及大多数投资和风险模型,但其之所以现在被视为一项重要的创新,关键原因在于机器学习在投资管理中的日益普及以及由此带来的过度拟合风险。GenAI 合成数据可以生成可信的市场情景,同时保持复杂关系并探索不同的条件。这项技术为更稳健的投资模型提供了途径。

然而,即使是最先进的合成数据也无法弥补简单的机器学习实现。对于过度复杂性、不透明模型或薄弱的投资理由,没有安全的解决方案。

韭菜热线原创版权所有,发布者:风生水起,转载请注明出处:https://www.9crx.com/90313.html

(0)
打赏
风生水起的头像风生水起普通用户
上一篇 2025年7月15日 22:34
下一篇 2025年7月21日 22:06

相关推荐

  • 为什么硅谷的人工智能预言感觉像是重新包装的宗教

    假设我告诉你,十年后,你所知道的世界将会终结。你将生活在一个天堂里。你不会生病,不会衰老,也不会死亡。永生将属于你!更好的是,你的思想将幸福地摆脱不确定性——你将获得完美的知识。哦,你将不再被困在地球上。相反,你可以生活在天堂。 如果我告诉你这一切,你会认为我是宗教传教士还是人工智能研究员? 任何一个都是一个相当可靠的猜测。 你越听硅谷关于人工智能的讨论,你…

    2023年9月19日
    17400
  • 异常外汇收益与基于流动性的机器学习方法

    外汇市场受到流动性波动的影响,这可能导致回报波动和价格跳跃。识别和预测异常外汇回报对于风险管理及交易策略至关重要。 本文探讨了两种先进的方法,使投资专业人士能够更好地理解和预测市场条件的变化。通过将流动性指标与预测算法相结合,投资者可以更深入地了解收益行为,并改善风险调整后的决策。 第一种方法侧重于异常值检测,其中稳健的统计方法隔离了具有异常大价格波动的时期…

    2025年7月8日
    1500
  • 谷歌希望通过复制 WhatsApp 使其聊天应用程序更加个性化

    Google Chat推出了七项新功能,因为它似乎正在将焦点从仅仅作为一个以业务为中心的平台转向变得更像WhatsApp。 老实说,大部分更新都包含类似服务中常见的非常基本的工具,您可以在其中与朋友或家人交谈。如果说有什么不同的话,那就是谷歌正在追赶他们。首先,用户最终将能够在应用程序上编辑或删除消息。执行其中一项操作就像在其他平台上一样:按住文本,然后做出…

    2023年7月12日
    15600
  • 埃隆·马斯克和马克·扎克伯格:他们真的要进行笼斗吗?

    男孩们正在战斗。或者不是吗? 当然,我们所说的“男孩”指的是科技亿万富翁埃隆·马斯克( Elon Musk),他拥有特斯拉、SpaceX,最近还拥有Twitter,以及马克·扎克伯格(Mark Zuckerberg ) ,他创立了Meta(前身为Facebook),后者还拥有Instagram和 WhatsApp。 他们分别是 51 岁和 39 岁——早在 …

    2023年8月18日
    19000
  • 技术如何增强投资者信任

    在某种程度上,信任是所有金融交易的核心,而技术可以实现并增强这种信任。 我们怎么知道?因为 50% 的散户投资者和 87% 的机构投资者表示,在金融服务中更多地使用技术增加了对其顾问/经理的信任。这是两年一度的第五版“增强投资者信任:2022 年 CFA 协会投资者信任研究”的主要发现之一。 《增强投资者信任》着眼于科技与金融信任之间的关系。它表明,对金融服…

    2023年8月2日
    22500
客服
客服
关注订阅号
关注订阅号
分享本页
返回顶部