MMLU Dataset(大规模多任务语言理解数据集) MMLU Dataset旨在通过仅在零样本和少样本设置中评估模型来衡量预训练期间获得的知识。这使得基准测试更具挑战性,并且更类似于人类评估知识的方式。该基准涵盖了STEM(科学、技术、工程和数学)、人文、社会科学等领域的57个学科,难度从初级到高级专业水平不等,既考验世界知识,也考验解决问题的能力。
麦考瑞大学 麦考瑞大学(Macquarie University) 是澳大利亚最具创新力与行业导向性的研究型大学之一,在语言学、临床医学、听力科学、商业分析、金融、教育、心理学、认知神经科学、法律与数据科学等领域具有国际声誉。它坐落于悉尼科技走廊核心地带,与全球500强企业园区紧密融合,因而被誉为“澳洲企业界最青睐的大学之一”。