jiangzg的个人博客分享 http://blog.sciencenet.cn/u/jiangzg

博文

大语言模型出现后还有必要作作业与考试吗? 精选

已有 4188 次阅读 2023-6-15 19:46 |系统分类:教学心得

2022年11月 OpenAI 发布了ChatGPT。ChatGPT是通过对1750亿条数据的预训练学习而产生的一个生成式语言模型,使用者不需要技术基础,可以在手机、电脑上实现文字输入问题,文字输出答案。于是,ChatGPT自豪地认为‘’由于它可以访问大量的信息,因此可以快速地对各种各样的问题提供准确而详细的回答“,在网络课堂教学中,作业和开卷考考卷设计常用的名词解释与问答题模式,已经不再是明智的考试方式。

这里我分享一下大语言模型出现后,我在网络课堂的设计的作业与考试试卷。

2023年3月份,我在网络课堂布置第一次作业时,要求尚在国外的留学生们不用ChatGPT之类的大型语言模型完成作业。布置第二次作业时,我想不能仅仅要求学生自律。于是,我将一篇短文删去标题,制成PDF文件,让学生阅读PDF文件,然后,尝试给出文章的标题。因为ChatGPT还不能输入图形文件。布置第三次作业时,我给出了一道关于物种濒危等级划分的解析题:

A monkey species in China has the following population parameters and habitat statutes:

1.        The populations of the monkey species have shown a trend of apparent increase during the past 50 years; now, the monkey species has a total of 188-220 populations.

2.        The total number of monkeys of the monkey species is 22,710.

3.        The distribution area of the monkey species remained stable overall and showed a trend of expansion in some areas. The Area of Occurrence of the monkey species is 55,355.93 km2.

4.        Since 1990, the construction of protected areas in the country has accelerated; the area of the protected area established for the monkey species is 20,744.93 km2.

5.        The number and area of protected areas with the distribution of the monkey species have more than doubled. The percentage of the monkey population in protected area is 95%.

Do you classify the monkey as a Threatened Species according to the IUCN Red List Criteria for Threatened Species? Why?

 

译文:中国有一种猴子的种群参数和生境状况如下:

 

1. 近50年来,该猴种的种群数量呈明显增长趋势; 现在,该猴种共有188-220个种群。

2. 该猴种的个体总数为22,710只。

3. 该猴种分布区域总体上保持稳定,局部地区有扩大趋势。该猴种出现面积为55355.93平方公里。

4. 自1990年以来,全国保护区建设加快; 该猴种保护区面积为20744.93平方公里。

5. 有这种猴分布的保护区数量和面积增加了一倍多。该猴种生活在保护区的猴群比例达95%。

 

你是否根据世界自然保护联盟濒危物种红色名录标准将猴子列为濒危物种? 为什么?

 

后来,我发现这道题并不能为难大语言模型,因为这道题目是文字题,将题目输入ChapGPT后,它思索了几分钟后就给出了答案:

“To classify the monkey species as a threatened species according to the IUCN Red List Criteria, we need to assess its conservation status based on several factors. The IUCN Red List Criteria take into account population size, population trends, distribution area, and the availability and effectiveness of conservation measures.

Based on the provided information, let's analyze each criterion:

Population size: The total number of monkeys in the species is 22,710. While this number does not give us a clear indication of the population size in relation to the IUCN Red List thresholds, it can still be considered relatively significant.

Population trend: The monkey species has shown a trend of apparent increase over the past 50 years. This indicates a positive population trend, which is generally a positive sign for species conservation.

Distribution area: The Area of Occurrence for the monkey species is 55,355.93 km2, and it has shown some expansion in certain areas. This suggests that the species has a relatively large distribution range, which is favorable for its long-term survival.

Protected areas: The monkey species benefits from the establishment of protected areas, which have more than doubled in number and area since 1990. The percentage of the monkey population in protected areas is high (95%), indicating a significant level of conservation efforts.

Considering the information provided, the monkey species does not appear to meet the criteria for being classified as a threatened species according to the IUCN Red List. It shows a positive population trend, a relatively large distribution range, and benefits from a significant percentage of its population being protected within designated areas. However, a comprehensive assessment by experts in the field is necessary to make an accurate determination of the species' conservation status.“

 

译文:

“为了依据世界自然保护联盟濒危物种红色名录标准将这种猴定为受威胁物种,我们需要根据几个因素评估其保护状况。世界自然保护联盟红色名录标准考虑种群规模、种群趋势、分布区域以及保护措施的可用性和有效性。

根据所提供的信息,我们逐一分每条标准:

种群规模: 该猴种的总数为22,710只。虽然这个数字并没有给一个与世界自然保护联盟红色名录阈值相关的种群规模的明确指示,但它仍然可以被认为是相对显著的。

种群趋势: 在过去的50年里,该猴种的数量呈现出明显的增长趋势。这表明了一个积极的种群趋势,这通常是物种保护的积极迹象。

分布面积: 该猴种的发生区面积为55355.93km2,并在部分地区有一定的扩展。这表明该猴种的发生区面积范围相对较大,有利于其长期生存。

保护区: 该猴种受益于保护区的建立,自1990年以来,保护区的数量和面积都增加了一倍多。生活在保护区内猴子种群的比例很高(95%),表明保护的水平很高。

考虑到所提供的信息,这种猴子似乎不符合列为世界自然保护联盟红色名录受威胁物种的标准。其种群数量呈正增长趋势,分布范围较大,有相当比例的种群在指定区域内受到保护。然而,为了准确地确定该物种的保护状况,需要由该领域的专家进行全面的评估。”

 

上述答案并不尽善尽美,如该猴种的个体总数给出了一个与世界自然保护联盟红色名录阈值相关的种群规模的明确指标,而不是“该猴种的总数为22,710只。……并没有给我们一个与世界自然保护联盟红色名录阈值相关的种群规模的明确指标”,再如世界自然保护联盟红色名录确定的不是一个物种的“保护状况”而是其“生存状况”。然而,ChatGPT能够回答文字输入的问题。

AI时代开卷考试如何命题?我在上一篇博客中即提出了问题。在期末开卷考试时,我是这样解决这一问题的:利用ChatGPT尚没有开放输入图形的特点设计了试卷:请学生们看图答卷。第一道题是来自Our World in Data的一张关于全球哺乳动物生物量的图,要求学生看图得出结论。

第二道题目是让学生看一张题为“在公元2070访问地球“的漫画,问同学们为了防止2070年在地球发生像漫画中那样场景,我们应当怎么办?


以上是我2023年春季学期上网课布置的作业以及为在没有监考、学生网络开卷考试设计的考试题。应当看到这些仅仅是权宜之计,因为未来大型语言模型会开放图形的输入。但随着新冠疫情的结束,也许不再在网课中开卷考试了。

重要的问题是大数据语言模型出现后还有必要给学生布置作业与考试吗?作业与考试是检验学生掌握学习知识的程度和运用知识解决问题的能力,当具有自学习能力、分析问题能力、具有掌握“无限的”、实时更新信息的AI出现后,人们还需要强记硬背那些知识和信息吗?不需要强记硬背、不进行课堂讲授会影响未来人们的知识结构、工作能力与创造能力吗?不需要强记硬背、不进行课堂讲授会缩短人们学习时间吗?不需要强记硬背、不进行课堂讲授会如何影响未来的教育?除了人机互作,通过大语言模型解答问题、写作之外,能否是通过实现脑机接口,直接将信息输入大脑?未来人们的工作效率会不会大幅度提升?未来人们对AI的依赖性会不会大大增加?未来人们的一些就业机会不会被AI取代?




https://blog.sciencenet.cn/blog-68091-1391889.html

上一篇:AI时代开卷考试如何命题?
下一篇:能用聊天机器人审稿吗?
收藏 IP: 210.73.9.*| 热度|

2 郑永军 朱朝东

该博文允许注册用户评论 请点击登录 评论 (0 个评论)

数据加载中...

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-7-12 10:29

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部