让AI去高考,豆包等四款大模型考上文科“一本”
高考不仅仅是检测国内莘莘学子的一项重要考试,在大模型“百家争鸣”的今天,也是对国内AI大模型的一次考验。
如果让大模型和国内学子同台竞技,做同一套高考真题试卷,结果会是怎样?
大模型考上文科本科,豆包获国内头筹
在极客公园最新发布的高考新课标Ⅰ卷大模型评测报告中,GPT-4o以562分排名文科总分第一。国内产品中,字节跳动旗下的豆包拔得头筹,成绩是542.5分。
据介绍,本次评测以新课标Ⅰ卷为考题,与河南省考卷完全相同。
河南省教育考试院公布的高考录取分数线,文科本科一批分数线为521。根据测试结果,这意味着,GPT-4o、豆包、文心4.0、百小应等四款AI大模型在测试中的得分冲上了“一本”线。
与文科相比,大模型的理科成绩要差很多,最高分还不到480分,多数大模型的理科总分在400分以下,数学普遍不及格,相比河南理科511分的“一本”线,大模型还需努力。
文科舒适区,英语具有压倒性优势
大模型处理自然语言方面的能力不容置疑,三款国产大模型产品获得了语文考试前三名,分别是百小应、字节豆包和腾讯元宝,得分依次为128分、125.5分和120.5分。丢分主要在语文写作上。
在匿名阅卷中,豆包获得阅卷老师的好评:文章中显出的对就业结构、伦理方面的担心,展现出豆包已经具有不错的思想深度和思辨能力。
具体看,在立住“问题”后,豆包随即用反问句自然过渡,引出三个排比段提出解决问题的方法。然后用发展的眼光分析问题,结合现实生活揭示问题产生的根源和危害的部分颇为亮点。
作为本次评测的语文作文阅卷人,北京市级骨干教师、怀柔区语文学科带头人夏老师曾多次参加全国高考语文阅卷。夏老师认为:“Al写出的文章大多有清晰完整的结构,有逻辑性,语言通顺流畅。但其理性有余,感性不足,缺乏感情色彩,自然就缺乏感染力。”
在历史和政治两科中,测试选手中有三至四家能达到80%以上的得分率。历史单科的桂冠归属豆包82.5的平均分。出乎意料的是,地理考试是文综三科中大模型表现最差的,最高分仅仅是 GPT-4o的68分。原因之一可能是地理涉及图片更多,AI识图能力有待提升。
大模型在高考英语测试中的优势更是压倒性的。一张150分满分的英语卷子,平均分达到132分,其中客观题几乎都是满分或接近满分,丢分主要在应用文写作和读后续写的作文部分,表达空泛、缺少细节上是弊端。
理科“掉链子”,AI有待提升
如上提到,大模型理科普遍不行,成绩要差很多,在数学、物理、化学等数理学科上差距极大,包括GPT-4o在内的所有大模型都无法达到及格水平。大模型的理科最好成绩还无法进入人类考生的前30%。
以数学试卷为例,9款大模型产品中,仅GPT-4o、文心一言4.0和豆包获得60分以上成绩(满分150分),目前的大模型只能正确推理步骤相对简单的问题。
据测试机构透露,豆包等大模型能准确运用求导公式和三角函数定理,但是面对较为复杂的推导和证明问题就很难继续得分。
重点考查实验探究能力的化学和物理试卷,各模型平均分更是只有34分和39分(满分为100和110)。化学单项最高分由豆包获得,成绩为49.5分,GPT-4o仅有42分。
另外,测试显示,大模型在应对考试的灵活性上也不如人类。例如物理有一道“送分”题,人类考生根据“时间不会倒流”可以排除错误选项,轻易选对正确答案“C”,大模型则几乎全军覆没。要学会像人类一样思考和解决问题,大模型还有很长的路要走。(完)
- 最近发表
-
- 随机阅读
-
- 以军继续空袭加沙 联合国警告或致当地发展倒退数十年
- 中国代表呼吁国际社会合力打击跨国有组织犯罪
- 俄卫生部门公布部分莫斯科恐袭遇难者名单
- 菲仕兰联合大客户开展亲子公益自然探索营活动
- 全球先进光伏和新型储能领域龙头企业竞相布局安徽
- 湖北为受灾困难群众发放19万件救灾物资
- 两岸师生畅游长江美景 交流创新创业经验
- 高校人事调整密集,又有院士校长履新
- “一带一路”自然灾害防治和应急管理国际合作机制成立
- 今年以来哈萨克斯坦为21.29万公民发放失业补助
- 广西优化出入境管理方式 护航中国—东盟自贸区发展
- 东方空间完成近6亿元B轮融资 加速“引力二号”研制
- 南亚东南亚多国专家齐聚昆明 共商数字经济合作
- 文博文创展区精彩亮相2024服贸会 中轴线文创吸睛
- 一问到底丨90多米长“风车”叶片上高速 如何一路畅通?
- 西藏举行天湖之旅推介,促西藏新业态旅游发展
- 示范区贡献日益显现 推进高标准服务业扩大开放
- 以加关税重振美国经济?国际企业及专家:代价还得美国自己付
- 地铁STEAM跨学科教育项目走进京城小学 拓展跨学科知识应用场景
- 中印古都文明对话(北京-斋普尔)以学术互鉴深化两国人文交流
- 热门推荐
-
- 第二届中国播音主持“金声奖”获奖名单公布
- 青海:到2026年底社区居家养老服务覆盖率达到100%
- 萨尔瓦多留学生:中国共产党的乡村振兴战略令人敬佩丨风华102载·世界观
- 打耳洞实属医美 消费之前看好有无“三证”
- 浙江黄岩:《黑神话:悟空》壁画带火乡村旅游
- 脉冲星研究取得新进展!有助于更全面探索中子星物理性质和星族性质
- 双向投资谋共赢——第二十四届中国国际投资贸易洽谈会开幕侧记
- 山东多地公祭悼念南京大屠杀死难者
- 虚拟世界里权益遭损害 法院以案说法
- 柬埔寨首批野生水产品出口中国
- 官方通报“女童被狗咬伤”:罗威纳犬主人被采取刑事强制措施
- 贵州纳晴高速牂牁江大桥合龙 为首座“纯贵州造”悬索桥
- 2024北京朝阳国际灯光节开幕 AI赋能尽显夜“潮”范儿
- 中国耕地总量三年净增1758万亩
- 2022年逾38万人获欧盟庇护 44%申请者获难民身份
- 京雄高速全线通车 北京驾车至雄安实现1小时内通达
- 北京专场招聘会为灾区提供近3500个就业岗位
- 冷空气影响内蒙古和东北地区等地 西南地区东部黄淮等地将有较强降雨
- 联合国儿童基金会:苏丹约350万儿童流离失所
- 发布8项创新成果 北京朝阳鼓励人力资源服务贸易机构“出海”