MMLU Dataset(大规模多任务语言理解数据集) MMLU Dataset旨在通过仅在零样本和少样本设置中评估模型来衡量预训练期间获得的知识。这使得基准测试更具挑战性,并且更类似于人类评估知识的方式。该基准涵盖了STEM(科学、技术、工程和数学)、人文、社会科学等领域的57个学科,难度从初级到高级专业水平不等,既考验世界知识,也考验解决问题的能力。
巴塞尔大学 巴塞尔大学(University of Basel,德语:Universität Basel) 是瑞士最古老的大学,创立于1460年,至今已有560多年历史,是欧洲人文学科与生命科学并重的研究型大学。它在生物医学、制药、神经科学、免疫学、哲学、古典语言学、宗教研究、法学、经济学、可持续发展等领域享有国际声誉,特别是在生命科学与跨国医药研发方面与诺华(Novartis)与罗氏(Roche)总部合作密切。