EnthreeN(代表 Nam Youngsam)截至11月8日下午5时,在“Open LLM Leaderboard 第二季”的11B及以下组别中,成为韩国首家夺得全球第一的企业。EnthreeN自研大语言模型以平均得分32.02分的成绩,力压多家全球知名人工智能企业。
今年6月启动的“Open LLM Leaderboard 第二季”对第一季的评估指标和评估方式进行了大幅改版后全新上线。改版后的评估方式难度大幅提升,因此,全球主要大型科技企业微软(29.67分,第17名)、谷歌(28.86分,第22名)、Meta(28.2分,第29名)也仅停留在相对靠前但并不拔尖的名次。
然而,在韩国主要人工智能企业中,Upstage得分19.63分,位列第278名;KAIST AI得分19.18分,位列第293名;而在第一季中曾约50天占据榜首的2Digit,本季得分18.49分,仅列第311名,正面临挑战。本次第二季中,韩国企业鲜有取得突出成绩的案例。
第一季11B及以下组别综合第一名的分数高达76.76分,但在第二季则大幅降至32.02分。这是由于第二季评估难度上升、评估指标重新构成所致。比如,第一季采用的MMLU(大规模多任务语言理解)指标,在第二季被难度和评估项目均有所强化的MMLU-PRO所取代。
对此,EnthreeN人工智能团队长 Kim Seungseop表示:“EnthreeN从训练数据集的生成、数据评估到基于此的建模,构建了人工智能开发全流程的自主技术体系,本次成绩再次验证了这一技术实力已达到世界顶尖水准。”
此外,EnthreeN代表 Nam Youngsam强调:“此次成果证明,EnthreeN的人工智能技术实力不仅优于韩国主要人工智能企业,与全球大型科技公司相比也在客观上更具优势,这将成为今后提升客户对EnthreeN所提供人工智能服务信赖度的重要契机。”
他还补充称:“此次成果是在EnthreeN自有基础设施‘Jikji Labs’的支撑下取得的,也成为验证其可支撑世界级人工智能模型训练的基础设施能力的重要机会。”
另一方面,近期EnthreeN的人工智能计算基础设施专业品牌Jikji Labs已于10月23日至25日成功举办了线上线下同时进行的“AI Computing Industry Week”活动。今后,EnthreeN计划以Jikji Labs的基础设施为依托,于明年推出面向全球市场的人工智能服务。
版权所有 © 阿视亚经济 (www.asiae.co.kr)。 未经许可不得转载。