Community Evals:因为我们不再信任黑箱排行榜胜过社区
Community Evals: Because we're done trusting black-box leaderboards over the community
AI 导读LMSys 推出了社区驱动的评估框架 Community Evals,旨在通过开源和开放科学推进人工智能民主化。该框架允许社区贡献和审查评估案例,以透明、可复现的方式测试模型。此举旨在改变依赖少数机构“黑箱”排行榜的现状,让更广泛的社区参与定义和衡量AI模型的能力与价值。
来源:Hugging Face 社区博客 · huggingface.co