ML 模型需要更好的训练数据:GenAI 解决方案

我们对金融市场的理解本质上受到历史经验的限制——在无数可能展开的情景中,只实现了一个单一的时间线。每个市场周期、地缘政治事件或政策决定都只是潜在结果的一种表现形式。

训练机器学习(ML)模型时,这一限制尤为明显,因为模型可能会无意中从历史遗迹中学习,而不是学习底层的市场动态。随着复杂 ML 模型在资产管理中的普及,它们倾向于过度拟合特定的历史条件,这给投资结果带来了越来越大的风险。

生成式 AI 生成的数据(GenAI 生成数据)正在成为应对这一挑战的潜在解决方案。虽然生成式 AI 主要因其在自然语言处理方面的关注而受到关注,但其生成复杂生成数据的能力可能对量化投资过程更为重要。通过创建能够有效代表“平行时间线”的数据,这种方法可以被设计和工程化,以提供更丰富的训练数据集,同时保留关键的市场关系并探索反事实情景。

ML 模型需要更好的训练数据:GenAI 解决方案

挑战:超越单一时间线训练

传统的量化模型存在一个固有的局限性:它们仅从导致当前状况的单一历史事件序列中学习。这产生了我们称之为“经验性偏差”的问题。随着复杂机器学习模型的学习能力使其能够学习复杂的模式,它们在有限的历史数据上过度拟合的问题变得更加突出。一种替代方法是考虑反事实情景:如果某些可能任意的事件、决策或冲击以不同的方式展开,这些情景可能会发生

为了说明这些概念,考虑 MSCI EAFE 基准的活跃国际股票投资组合。图 1 展示了过去五年(截至 2025 年 1 月 31 日)多个投资组合的表现特征——上行捕捉、下行捕捉以及整体相对回报。

图 1:经验数据。EAFE 基准投资组合,截至 2025 年 1 月 31 日的五年表现特征。

ML 模型需要更好的训练数据:GenAI 解决方案

这个经验数据集仅仅代表了可能的投资组合的一小部分,而如果事件发展不同,潜在的结果样本会更小。传统上扩展这个数据集的方法存在显著的局限性。

图 2.基于实例的方法:K 最近邻(左),SMOTE(右)。

ML 模型需要更好的训练数据:GenAI 解决方案

传统合成数据:理解限制

常规的合成数据生成方法试图解决数据限制问题,但往往无法捕捉金融市场的复杂动态。以我们的 EAFE 投资组合为例,我们可以考察不同方法的表现:

基于实例的方法,如 K-NN 和 SMOTE 通过局部采样扩展现有数据模式,但从根本上仍然受限于观察到的数据关系。它们无法生成远超出训练示例的场景,限制了它们对未来市场条件的理解能力。

图 3:更具灵活性的方法通常能改善结果,但难以捕捉复杂的市场关系:GMM(左),KDE(右)。

ML 模型需要更好的训练数据:GenAI 解决方案

无论是通过实例方法还是密度估计的传统合成数据生成方法都存在根本性的局限性。虽然这些方法可以逐步扩展模式,但它们无法生成保留复杂相互关系的同时探索真正不同的市场条件的现实市场情景。当我们研究密度估计方法时,这一点尤为明显。

如 GMM 和 KDE 这样的密度估计方法在扩展数据模式方面更具灵活性,但仍难以捕捉金融市场的复杂、相互关联的动力。这些方法在制度变化期间尤其难以应对,因为历史关系可能会发生变化。

Recent 研究在城市圣乔治和华威大学进行,并在纽约大学 ACM 国际金融人工智能会议上(ICAIF)展示,表明生成式 AI 可能更好地逼近市场的数据生成函数。通过神经网络架构,这种方法旨在学习条件分布同时保留持久的市场关系。

研究与政策中心(RPC)即将发布一份报告,该报告将定义合成数据,并概述可用于创建它的生成 AI 方法。该报告将强调评估合成数据质量的最佳方法,并引用现有的学术文献来突出潜在的应用场景。

图 4:展示了 GenAI 合成数据如何扩展现实可能结果的空间,同时保持关键关系。

ML 模型需要更好的训练数据:GenAI 解决方案

这种合成数据生成的方法可以扩展以提供几个潜在的优势:

  • 扩展训练集: 对有限的金融数据集进行现实增强
  • 情景探索: 生成合理的市场条件,同时保持持久的关系
  • 尾事件分析: 创建多种但现实的压测情景

如图 4 所示,GenAI 合成数据方法旨在扩展可能的投资组合绩效特征的空间,同时尊重基本的市场关系和现实的边界。这为机器学习模型提供了更丰富的训练环境,可能减少其对历史伪影的脆弱性,并提高其在不同市场条件下泛化的能力。

在证券选择中的应用

对于特别容易学习虚假历史模式的股票选择模型而言,GenAI 合成数据提供了三个潜在的好处:

  1. 减少过拟合 : 通过在各种市场条件下进行训练,模型可能更好地区分持久信号和暂时的伪影。
  2. 增强尾部风险管理: 训练数据中包含更多样化的场景可能在市场压力期间提高模型的稳健性。
  3. 更好的泛化能力: 保持现实市场关系的扩展训练数据可能有助于模型适应不断变化的条件。

有效实施 GenAI 合成数据生成本身也带来了技术挑战,这些挑战可能比投资模型本身还要复杂。然而,我们的研究表明,成功应对这些挑战可以通过更稳健的模型训练显著提高风险调整后的回报。

GenAI 通往更好模型训练的道路

GenAI 合成数据有可能为投资和风险模型提供更强大的前瞻性洞察。通过基于神经网络的架构,它旨在更好地逼近市场的数据生成函数,从而可能更准确地代表未来市场条件,同时保持持久的相互关系。

尽管这可以惠及大多数投资和风险模型,但其之所以现在被视为一项重要的创新,关键原因在于机器学习在投资管理中的日益普及以及由此带来的过度拟合风险。GenAI 合成数据可以生成可信的市场情景,同时保持复杂关系并探索不同的条件。这项技术为更稳健的投资模型提供了途径。

然而,即使是最先进的合成数据也无法弥补简单的机器学习实现。对于过度复杂性、不透明模型或薄弱的投资理由,没有安全的解决方案。

韭菜热线原创版权所有,发布者:风生水起,转载请注明出处:https://www.9crx.com/90313.html

(0)
打赏
风生水起的头像风生水起普通用户
上一篇 2025年7月15日 22:34
下一篇 2025年7月21日 22:06

相关推荐

  • Nvidia 的爆炸性增长掩盖了人们对人工智能的失望

    硅谷有人知道这句俗语吗:“人越大,摔得越重?”也许这只是时间问题。 人工智能热潮已推动英伟达公司成为全球市值最高的公司,科技公司领导人应该对英伟达公司的快速崛起感到不安。这家公司向少数几家云计算巨头出售令人垂涎的人工智能芯片,而这些巨头正在从人工智能的炒作中获取短期利益,尽管下游情况看起来更加不明朗。很难想象英伟达首席执行官黄仁勋将如何维持这样的增长(即使他…

    2024年7月7日
    9500
  • 使用 ChatGPT 生成基于 NLP 的投资策略

    由巴普蒂斯特·莱福尔、Eric Benhamou(博士)、Jean-Jacques Ohana(特许金融分析师)、Béatrice Guez、David Saltiel 和 Thomas Jacquot(特许金融分析师) 金融世界依赖及时的洞察、准确的分析和前瞻性的策略。多年来,自然语言处理(NLP)已成为解读大量金融文本的宝贵工具,帮助投资者和分析师做出明…

    2025年2月9日
    16600
  • OpenAI、Google 和 Meta 正使用您的数据构建他们的 AI 系统

    当白宫公布七家人工智能公司签署的自愿安全和社会承诺清单时,有一点明显缺失:与这些人工智能系统收集和用于训练这项强大技术的数据相关的任何内容。很可能包括你的。 人们对复杂的生成人工智能系统给公众带来的潜在危害有很多担忧。他们对我们的数据所做的事情就是其中之一。我们对这些模型从哪里获取所需的 PB 数据、如何使用这些数据以及在涉及敏感信息时采取了哪些保护措施(如…

    2023年8月5日
    23400
  • 如何关税可能加速美国的人工智能革命:对投资者的影响

    2024年美国总统大选带来了重大的政策转变,新的关税和贸易策略预示着数十年来开放市场全球化时代的结束。虽然这些变化短期内给企业和投资者带来了不确定性,但也可能为战略重组奠定基础:加速美国制造业投资和人工智能驱动的生产力激增。如果管理得当,这一转变可能会引发美国经济的新时代。 了解关税如何重塑投资趋势并加速人工智能的采用对于预测美国经济下一阶段的增长至关重要。…

    2025年6月20日
    5200
  • 美国银行的 Hartnett 表示,增长型、人工智能股票再次受到青睐

    作者:Farah Elbahrawy,2024 年 1 月 20 日 美国银行(Bank of America Corp.)策略师表示,2023年引领涨势的股票再次成为交易员的首选,无视更广泛的资金外流。 随着 10 年期国债收益率稳定在 3.75% 至 4.25% 的范围内,投资者正在重新持有增长、科技、“人工智能泡沫”和所谓的七大股票,其中包括苹果公司。…

    2024年2月3日
    23000
客服
客服
关注订阅号
关注订阅号
分享本页
返回顶部