最近,复旦大学一场特殊的“反套路”期末考试结束。在该校的“数据挖掘技术”课程考试中,学生们没有坐在考场里答题,反而成了出题人,他们用自己设计的10道题,去考3个当今最先进的AI模型。AI答错的题越多、被难倒的模型越强,出题学生的得分就越高。
结果如何呢?51份期末试卷里,50名学生至少让某个AI模型答错过1题,仅1人完全没难倒任何模型。但能让任一AI模型整张卷得0分的,只有4名学生,且3个应考模型中最强的Claude模型没有被任何学生完全考倒。
为什么要这么考?教授解释说,传统的出题考查方式在AI时代已经失效,在AI的强项上跟AI比没有意义。所以这次反过来,让学生出题去考3个AI模型,要求答案是唯一的,且出题人自己得先把题算对。
其中一名大一学生拿了97分的高分。出题过程中,他发现AI会“作弊”,于是加了一个“审查层”来抓作弊,最终成功生成10道题难倒了应考的AI模型。
教授最后点评:高分学生能精准戳中AI“弱点”,低分学生只是改了课本习题的数字,AI早就“背”会了。
智取
AI再强,也有“弱点”,找到了就能战胜它。