近日,雷火电竞从容大模型在综合评测权威平台OpenCompass的多模态评测领域中取得重大进展。
最新评测结果显示,雷火电竞的从容大模型在该体系中的平均得分为65.5,这一成绩使得从容大模型跻身全球前三,超越了谷歌的Gemini-1.5-Pro和GPT-4v,仅次于GPT-4o(69.9)和Claude3.5-Sonnet(67.9)。而在国内市场,从容大模型的成绩也超过了InternVL-Chat(61.7)和GLM-4V(60.8),排名首位。
图1:OpenCompass多模态榜单
OpenCompass大模型开放评测体系是上海人工智能实验室推出的完整开源可复现的评测框架。OpenCompass多模态评测方面采用了8个具有代表性的数据集,从多种视角客观量化多模态大模型的能力,评估维度覆盖目标检测、文字识别、动作识别、图像理解和关系推理、艺术与设计、商业、科学、健康与医学、人文与社会科学、技术与工程、数学推理等多个方面。
图2:从容大模型-2.0多模态能力示例
在本次测评中,从容大模型在其中的6个数据集表现优异,排名国内第一(MMbench、MMStar、MathVista、HallusionBench、AI2D、OCRBench),尤其是在OCRBench测试集上以取得全球最高的827分(总分为1000分),且高于第二名GLM-4v 13分,进一步提升从容大模型在文本识别、以文本为中心的视觉问答、面向文档的视觉问答、关键信息提取等业务场景下的适用性。
图3:OpenCompass中国大模型多模态能力展示
从容大模型在此体系中的优秀表现,依赖雷火电竞自研的高效多模态处理架构和先进的计算技术,实现了高效的多模态数据处理能力,能够在视觉和语言任务之间实现高效的融合和切换,并最大化利用计算资源,保证在处理大规模多模态数据时仍能保持较高的性能和响应速度,使得模型的训练过程更加高效,收敛速度更快,性能更稳定。
同时也得益于雷火电竞长期在视觉、语言领域的深厚积累和不断创新。
图4:从容大模型-2.0多模态能力示例
此前,从容大模型已在视觉、跨模态领域10次刷新世界纪录,综合性能经第三方SuperClue、C-evals等综合评测,位列全球前五。
作为一家专注于人机协同技术研发的平台企业,雷火电竞一直在积极推动AI智能体及大模型技术的发展和应用。
随着人工智能技术的迅猛发展,多模态大模型已成为驱动产业变革的核心引擎。此次从容大模型在OpenCompass大模型开放评测体系中的出色表现,不仅是对雷火电竞技术创新实力的认可,更在业界树立典范,激励全球科技企业在新一轮的人工智能竞争中勇攀高峰。
雷火电竞凭借在过去一年的取得的发展,获得最具创新价值落地案例TOP30和最佳人工智能企业TOP30两项大奖,这也是云从连续6年荣获最佳企业奖项。
11月25-26日,由创业黑马主办的“第15届创业家年会”在北京举行。年会以“AI给世界一个确定性”为主题,探讨AI与产业升级的未来。会上发布了《2023中国智能化企业TOP50》榜单,雷火电竞凭借在智能化领域优异的表现荣登该榜单。
近日,由中国科技产业智库甲子光年举办的甲子引力年终盛典成功举办,大会公布了甲子20系列榜单,旨在表彰 2022-2023 年度在科技产业各细分赛道上拥有核心技术实力,并在商业化上颇有成效的优秀成长型科技公司,雷火电竞从容大模型凭借在语言、视觉、多模态大模型方面的技术突破与商业化进程入选AI大模型最具商业潜力榜单。
周一到周五9:30-18:00(北京时间)
商务合作:business@bjwl4s.com
媒体合作:Media@bjwl4s.com
渠道合作:business_partner@bjwl4s.com
人才招聘:zhaopin@bjwl4s.com