百川智能发布全链路领域增强金融大模型Baichuan4-Finance,整体准确率领先GPT-4o近20%
12月23日消息,百川智能发布全链路领域增强大模型Baichuan4-Finance。在高质量金融数据的基础上,通过行业首创的领域自约束训练方案,Baichuan4-Finance实现了金融能力和通用能力同步提升的效果,极大提高了金融场景的整体可用性。
Baichuan4-Finance金融专业能力和场景应用能力领先GPT-4o近20%,在中国人民大学财政金融学院新近发布的评测体系FLAME以及国内主流开源金融评测基准FinancelQ上均登上榜首。
据介绍,Baichuan4-Finance能够在效率提升、风控合规、客服、决策支持等诸多层面为金融行业带来全方位的价值提升。Baichuan4-Finance能够帮助金融从业者处理文档审核、客户咨询、产品营销等大量日常工作,还能依托深厚的金融专业知识和法律法规理解能力,为机构提供精准的风险识别和合规保障。此外,还可以凭借强大的数据分析能力为管理层提供专业的市场洞察和决策建议。
目前,Baichuan4-Finance API已在百川智能官网正式上线。
整体准确率领先GPT-4o近20%,多个金融评测榜单第一
FLAME(Financial Large-Language Model Assessment and Metrics Evaluation)是中国人民大学财政金融学院12月17日发布的金融评测体系(github地址:https://github.com/FLAME-ruc/FLAME/tree/main)。
作为金融领域最新的评测体系,FLAME兼顾专业性和实用性,由两个方向的评测基准组成。其中,FLAME-Cer主要面向模型的专业金融能力评测,覆盖了CPA、CFA、FRM等14类权威金融资格认证;FLAME-Sce则侧重模型的场景应用能力,包含10个一级核心金融业务场景,21个二级细分金融业务场景,近百个三级金融应用任务。
FLAME-Cer评测结果显示,Baichuan4-Finance在银行、保险、基金、证券等多个资格认证领域的准确率均突破了95%,整体准确率93.62%,大幅领先GPT-4o和XuanYuan3-70B-Chat,超出GPT-4o近20%。GPT-4o是金融领域公认的综合实力最强的通用模型之一,而XuanYuan3-70B-Chat则是国内首个开源中文金融大模型。
在FLAME-Sce评测中,Baichuan4-Finance一级核心金融业务场景的整体可用率达84.15%,其金融数据计算、金融知识理论等场景的可用率更是超过90%,实际应用场景中的表现非常优秀。
不仅如此,在国内主流开源金融评测基准FinanceIQ上Baichuan4-Finance同样超越了GPT-4o和XuanYuan3-70B,整体准确率达到79.23%,领先GPT-4o近13%。
首创领域自约束训练方案,模型金融专项能力和通用能力同步提升
如何让模型在提升专业能力的同时不损失通用能力,是当下大模型落地具体场景最大的阻碍。为解决这一问题,百川智能打造了一套全链路领域增强方案,该方案覆盖了高质量数据集构建、模型预训练、微调、强化学习等从模型研发到场景应用的全流程。
在模型训练阶段,通过行业首创的领域自约束训练技术,百川智能实现了模型专项能力和通用能力同步提升的效果,极大提升了模型多元场景的可用性。而Baichuan4-Finance正是这一方案的最新成果,全链路金融领域增强让其既掌握了扎实的金融理论基础,又具备了丰富的多场景实践应用能力。
具体而言,Baichuan4-Finance的高质量金融数据集全面且严谨,既包含金融专业教材与学术著作、顶级金融期刊论文、监管机构政策文件、金融法律法规等核心专业金融知识数据,也覆盖了金融专业问答集、企业财报与年度报告、金融类研究分析报告等实践应用类数据,为提升模型金融能力提供了良好的底层支撑。
在此基础上,Baichuan4-Finance还在领域自约束训练过程中引入了更高精的通用数据,与高质量金融数据一起进行混合训练,最终实现了模型通用能力不下降,金融能力稳定增长的效果。
此外,百川智能在后训练环节也做了大量增强工作,如:通过合成数据、指令数据对模型进行有监督的微调;在强化学习策略中,针对数学计算等金融领域特别关注的场景进行样本增强等,进一步提升了模型性能。
值得一提的是,为了更好地助力金融企业将大模型应用到各种真实场景,百川智能还在官网发布了Baichuan4-Finance全链路领域增强的技术报告,详细阐述了包括“领域自约束训练”在内的各项技术细节。此举不仅将极大增强金融行业对大模型的认知,还将有效提升金融企业部署大模型的能力与意愿。
据悉,目前百川智能已经服务了数千家客户,包括北电数智、完美世界游戏、爱奇艺、360集团、生学教育、爱学堂等各行业的领军企业,并且与信雅达、用友、软通动力、新致软件、达观数据、华胜天成等多家行业生态伙伴,以及华为、中科曙光等硬件厂商,中国移动、中国电信、中国联通等运营商达成合作,携手构建百川大模型生态。
2月23日消息,据外媒报道,苹果正在内部测试一款类似于OpenAI旗下AI聊天机器人ChatGPT的生成式人工智能(AI)工具,该工具名为“Ask”,可以根据苹果内部数据库信息自动生成答案。随着ChatGPT和谷歌旗下AI聊天机器人...
投资公司黑石集团拟斥资100亿英镑,在英建设全欧最大规模AI数据中心之一9月27日消息,英国首相办公室当地时间本月25日宣布,美国私募股权公司黑石集团计划投资100亿英镑(备注:当前约936.53亿元人民币),从明年开始在英国诺森伯兰郡(首府纽卡斯尔)的布莱斯地区建设全欧洲最大规模的AI...
造富神话破灭,AI公司排队卖身AI大模型不光有造富神话,同样也有破产、倒闭、求收购。2024年第二季度还没有结束,美国AI公司就开始倒闭热潮。曾经有10亿美元估值、180名员工、创造出StableDiffusion系列模型的明星创企StabilityAI,传出资金链断...
看起来,同传口译也要被AI取代了在笔译逐渐失业之后,口译这个工作也要被机器取代了吗?就在上个月,全球最大的外语学习社区多邻国(Duolingo)开掉了世界各地的数千名合同工翻译,全面转用生成式AI来翻译用户的学习界面。根据被解雇的翻译爆料,即...
周鸿祎给的流量,能帮哪吒汽车重回榜首吗?7月8日消息,近期,哪吒汽车母公司合众汽车向港交所正式提交上市申请。手握360、奇富科技、花房集团和鲁大师四家上市公司的周鸿祎,将迎来他的第五家上市公司哪吒汽车。从3年前斥资19亿元投资哪吒汽车成为“产品经理...
如何选购kawai电钢琴??2023年kawai选购攻略大全来了!
哈喽!最近有超多小伙伴问我:怎么选一台kawai性价比高的电钢琴?为了解决大家在选择kawai电钢的困惑,我专门...
苹果招募生成式AI人才 提供数十个大模型岗位
根据最新的招聘信息,苹果正在扩大其生成式人工智能领域的专业团队,并计划将这项技术应用于iPhone和iPad等...
昆仑万维旗下Opera生成式AI服务海外用户数突破100万
昆仑万维旗下Opera宣布,生成式AI服务Aria海外用户数突破100万。2023年5月24日,Opera正式推出生成式AI助理...
创始人王慧文退出 美团成AI公司光年之外唯一股东
8月7日消息,据国家企业信用信息公示系统显示,北京光年之外科技有限公司在近期完成工商变更,创始人王慧文...