06.大模型的困境

AI“百模大战”打响 谁能称王？ (opens new window)中提到大模型的现状以及发展的3个难点：

• 可以基于任务的性能测试，即通过定义任务集的方式，去比较所有大模型在每个任务上面的完成度。

这种性能测试与人类能力对齐，包括理解能力、推理能力、判断能力等。根据现在的反馈，任务性能测试上，包括ChatGPT在内，没有一个大模型能够全部达标。

• 安全性、伦理性和合规管理
• 模型工程化

大模型能够接收多大的文本、回答反应的速度、运行的性能等。