跳到正文
Hugging Face Blog·· 2024-10-01AI 评分22

Hugging Face 发布 BenCzechMark:首个捷克语 LLM 综合评测基准

🇨🇿 BenCzechMark - Can your LLM Understand Czech?

AI 导读

Hugging Face 推出 BenCzechMark,这是首个面向捷克语的大语言模型综合评测套件,包含 9 大类共 50 项任务,其中 90% 为原生非翻译内容。配套排行榜已收录 25 个以上不同规模的开源模型,任务覆盖阅读理解、事实知识、捷克语理解、数学推理、自然语言推理、命名实体识别、情感分析与文档检索等,并采用 Acc、EM、AUROC、Ppl 等指标评估。

来源:Hugging Face Blog · huggingface.co