科大讯飞在人工智能领域再获新进展，据天眼查最新财产线索信息透露，该公司已于6月6日成功公布了一项名为“大模型评估的创新方法、相关装置、设备、系统及程序产品”的专利。
该专利的核心在于提出了一种全面且高效的大模型评估体系。具体而言，该体系首先会收集目标大模型在问答环节产生的对话数据。随后，系统会依据对话之间的逻辑连贯性，自动抽取出指令，并对这些指令进行评分，得出初步评估分数——第一得分。同时，系统还会提取对话中的答案信息，与前一个答案进行对比，以评估答案的一致性和连贯性，得出第二得分。答案的质量也会经过专门的评价，获得第三得分。
最终，这三个得分将被综合起来，形成一个综合性的目标得分，以此作为对目标大模型性能的全面评估。这一方法不仅实现了评估过程的多维度覆盖，还特别针对多轮对话的特性进行了优化，确保了评估的准确性和全面性。尤为重要的是，该体系通过自动化手段大幅降低了人工参与度，有效避免了因个人主观判断可能带来的偏差，从而提高了评估的客观性。
科大讯飞的这一创新，无疑为其在人工智能领域的持续深耕增添了新的动力。随着技术的不断进步和应用场景的不断拓展，科大讯飞正以其强大的技术实力和创新能力，引领着人工智能行业的发展潮流。
