Tag: Evaluation Framework

All the papers with the tag "Evaluation Framework".

• am-ELO: A Stable Framework for Arena-based LLM Evaluation

  grok-3-latest

  Score: 0.47

  Published:2025年5月6日 at  at 12:28

  #LLM, #Evaluation Framework, #Ranking System, #Annotator Modeling, #Stability

  本文提出 am-ELO 框架，通过最大似然估计和标注者能力建模，显著提升了大型语言模型竞技场评估中 ELO 评分系统的稳定性和准确性。

• Beyond the model: Key differentiators in large language models and multi-agent services

  grok-3-latest

  Score: 0.60

  Published:2025年5月5日 at  at 09:15

  #LLM, #Computational Efficiency, #Data Management, #Evaluation Framework, #Latency Optimization

  本文通过系统综述，揭示了生成式 AI 从模型中心向生态系统中心转变的趋势，总结了数据质量、计算效率、延迟优化、评估框架和数据管理等关键差异化因素，为 AI 服务优化提供了全面参考。