随着我国“人工智能+”行动加速推进,大模型技术在金融领域的应用持续落地。为全面评估金融领域大模型的专业、可靠程度,近日,上海财经大学推出金融领域大模型评估基准升级为FinEval 6.0,新增了金融严谨性等维度并发布首份评测报告。FinEval 6.0对国内外主流大模型的评测显示,蚂蚁集团旗下理财AI“蚂小财”的模型底座在金融严谨性等维度表现突出排名第一。
公开资料显示,上海财经大学是国内最早开展金融领域大模型测评工作的高校之一,并在2024年参与制定了《金融大模型应用测评指南》,这是以金融业务能力为核心的团体标准。此次,上海财经大学结合对AI企业、金融机构的调研与投资者洞察,重点完善了FinEval 6.0的严谨性评测样本,从金融学术知识、金融行业理解、金融严谨性测试、金融安全认知、金融智能体应用等关键维度,全面评估大模型在复杂金融业务场景中的表现。
图片来源于网络,如有侵权,请联系删除
同时,FinEval 6.0对国内外9款有代表性的大模型进行评测,包括DeepSeek-R1、GPT-4o等通用基础模型,以及金融垂直领域模型。评测报告结果显示,参评模型在金融学术知识方面的表现整体优异,但在金融严谨性、金融行业理解等适配复杂场景的能力上表现各异。其中,理财AI“蚂小财”的模型底座、蚂蚁自研Finix大模型整体表现较好,总分跑赢了通用大模型。尤其在金融严谨性上,行业均值为70.27分,蚂小财超出均值17分显著领先。
官方数据显示,“蚂小财”是蚂蚁集团旗下的AI理财管家,连接了蚂蚁财富平台生态内200多家基金公司、券商和财经媒体的内容与服务。在通用大模型的基础上,“蚂小财”技术团队还搭建了一套金融智能增强的技术体系,实现了金融场景内专业功能、交互体验的全面增强。
图片来源于网络,如有侵权,请联系删除
“金融领域是国内AI技术应用的焦点场景之一,但天然也对AI的专业性、严谨性等能力提出更高标准。目前国内AI在金融领域的表现逐渐提升,不断从“博闻强识”走向“专业审慎”,为下一阶段大规模应用打好了基本盘。”测评团队负责人、上海财经大学教授张立文表示,这些“AI+金融场景”的积极稳妥探索,有助于在国际AI产业竞争中保持领先身位,也将打开我国数字金融、普惠金融建设的新局面。
【纠错】 【责任编辑:周靖杰】-
新华全媒头条丨走进山海关中国长城博物馆
- 财经聚焦丨从田间到餐桌,夏粮收储加工一线追踪
- 新华全媒+丨银发经济为消费市场注入新活力
- 专访丨亚投行国际影响力不断增强
- 经济参考报丨跨国公司深耕中国市场 书写互利共赢新篇章
- 文化新观察丨读中国 阅世界——第三十一届图博会观察
- 深读丨美国“下场”后,三问中东局势走向
-
迪迩秀丨南博爆款秘籍
-
高铁游山海 “奇遇”甲骨文
推荐阅读:
抖音直播持续强化暑期保护 未成年人打赏平均21小时内全额垫赔
助力山区儿童学会自我保护 字节跳动公益启动“益童普法小课堂”