["谷歌研究人员引入了一种名为Cappy的预训练评分器模型，旨在提升大型多任务语言模型性能。","Cappy的架构基于RoBERTa，通过多样化数据集集合进行预训练，提高多任务法学硕士的性能和效率。","通过引入轻量级预训练评分器Cappy，解决了多任务场景中有效利用大型语言模型的挑战。","研究人员提出一种数据构建方法，满足预训练数据中标签多样性需求，生成大型有效的回归预训练数据集。","Cappy的应用程序包括候选者选择机制，可独立运行于分类任务，增强现有多任务LLM的解码。"]