清华学霸、OpenAI姚顺雨：AI下半场开战，评估将比训练重要

本文探讨了AI发展的“下半场”，强调了评估的重要性将超过训练。上半场AI主要聚焦于模型和方法的创新，如Transformer、AlexNet和GPT-3等基础性突破。随着这些创新的累积，AI的发展重心正在转向定义问题和评估。文章指出，强化学习中的先验知识和环境因素比算法更为重要，而语言预训练为智能体提供了通用常识和语言知识。下半场的挑战在于重新思考评估设置，创造更接近现实世界的任务，以提高AI的实用性。作者认为，唯有打破惯性思维，质疑基本假设，才能进行真正改变游戏规则的研究。