试用chatgpt进行科创B卷考试且成功通过
章鱼wheat2023/03/03原创 软件综合 IP:江西
关键词
chatgptopenaiai

最近闲得蛋疼,刚好去注册了个chatgpt,玩了一段时间,问它一些网上直接搜索搜索不到的东西,它也能很好的回答出来,所以我萌发出了一个想法,就是能不能用chatgpt通过b卷的考试呢,当然我肯定是先通过了b卷,这个chatgpt是之后想到测试的,不过我之前考b耗费了很多次数,导致目前只测试了3个专业,其余的可以自行尝试并分享

''因为我不能保证我自身认为的答案是否正确,所以我只会标注直接搜索能出来答案的问题。

PS:黑框为自主填写,因为我认为与专业无关,不过chagpt的第二次答案也是与自主答题相符,红框为二次提问两次回答不同,绿色为可以直接非常轻松被搜索出来的答案 

物理专业: 

物理.png

结果为未通过

由于我想到了chatgpt对编程和语言方面可能有优势所以我又测试了软件开发

软件开发:

软件开发.png




结果通过了测试

计算机专业:

计算机科学.png

结果为不通过

以下为两次不同的chatgpt截图和非常轻松被搜索出来的答案的搜索截图

孙文红教授:

教授.png


教授二.png


爱好者:

}ZJU1)1Q@Q]6Y{3TH1II[$F.png

_`[AF19GBYYUY$U]3{[%1VM.png


HYTGVBM~XZGELQ3{XQ$VRY0.png

非常轻松被搜索出来的答案:

5R}T5C$]J0O3K)WUC)K_60Y.png BOUL0K7EV78CP{CV_FIQ752.png F@`BSJ~6]TE57$FO$8}}377.png T[9W)0(DKS{ST@3YG8JO0U1.png


由于之前答题用了过多次数,只测试了3个专业,所以目前只能提出一些浅显的结论:

  1. 多次提问可以增强准确性

  2. chatgpt在3个专业中擅长于软件开发

  3. chatgpt可以轻易的说出难以搜索出来的问题

  4. chatgpt准确性较低,容易一本正经的胡说八道,看似合理实则不合理的内容,更容易误导大众

  5. 在一些可以直接搜索出来的答案的问题下目前来看正确率还是很高的,可以比较好的节省时间

所以目前chatgpt不能很好的替代搜索引擎,错误率高,信息来源未知,不过最新的new bing会列出信息来源,不过内测没被选中,未能测试

让我没有想到的是chatgpt应该非常擅长于语言理解,但是在爱好者那里出现了两种不一样的结论,其余的专业可自行测试,可把测试结果分享出来,我感觉英语专业它应该会比较容易成功,不过未能测试,由于chatgpt不好截图,所以没贴出来全部,如果需要我会发出来到评论区

+0.5  科创币    maizhangyu    2024/06/08 testetsetset
来自:计算机科学 / 软件综合动手实践:实验报导
27
7
 
高赞回复 
已屏蔽 原因:{{ notice.reason }}已屏蔽
{{notice.noticeContent}}
~~空空如也
虎哥
1年8个月前 修改于 1年8个月前 IP:四川
917482
引用xa87发表于3楼的内容
1分钟就答完题了。

您怎么做是您的自由,但不可以说嘛。证据确凿,根据《增规》第9.1款“在科创设立的考试中舞弊的”,进行封号处理。

该账号系首次通过考试,而非已通过考试而仅仅进行测试:

image.png

另外,答题卡与楼上截图选择一致,错也错得一样,果然十分真实。

44
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
虎哥
1年8个月前 IP:四川
917476

从有限的例子可以看出,chatgpt几乎从不做真正的逻辑判断,尽管其回答看起来层层递进,很讲逻辑。公共题其实几乎全是逻辑题,而它总是进行局部的事实判断。

25
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
悟死参玄
1年8个月前 IP:浙江
917578
引用高氯酸铵发表于6楼的内容
作弊有这么麻烦?翻译软件翻一下英语就行了。(本人没有这样做,我早就通过物化生了)建议取消这个专业。

别的不好说,至少英语专业仅靠翻译是很难过的。如果没有英语的“思维“靠学校教的阅读理解给你全文翻译也没用

11
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
虎哥
1年8个月前 IP:四川
917476

从有限的例子可以看出,chatgpt几乎从不做真正的逻辑判断,尽管其回答看起来层层递进,很讲逻辑。公共题其实几乎全是逻辑题,而它总是进行局部的事实判断。

引用
评论
25
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
xa87
1年8个月前 IP:上海
917479

考试通过

恭喜您通过了 计算机科学 专业级 考试。

哈,谢谢楼主,之前一直没想起来用。

引用
评论(2)
2
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
xa87
1年8个月前 IP:上海
917480

1分钟就答完题了。

ChatGPT API Demo.png

引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
虎哥
1年8个月前 修改于 1年8个月前 IP:四川
917482
引用xa87发表于3楼的内容
1分钟就答完题了。

您怎么做是您的自由,但不可以说嘛。证据确凿,根据《增规》第9.1款“在科创设立的考试中舞弊的”,进行封号处理。

该账号系首次通过考试,而非已通过考试而仅仅进行测试:

image.png

另外,答题卡与楼上截图选择一致,错也错得一样,果然十分真实。

引用
评论(1)
44
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
zRed洲虹
1年8个月前 IP:上海
917511

哈哈哈哈,三楼自曝 sticker

引用
评论(3)
7
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
高氯酸铵
1年8个月前 修改于 1年8个月前 IP:北京
917563

作弊有这么麻烦?翻译软件翻一下英语就行了。

(本人没有这样做,我早就通过物化生了)

建议取消这个专业。


引用
评论
3
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
悟死参玄
1年8个月前 IP:浙江
917578
引用高氯酸铵发表于6楼的内容
作弊有这么麻烦?翻译软件翻一下英语就行了。(本人没有这样做,我早就通过物化生了)建议取消这个专业。

别的不好说,至少英语专业仅靠翻译是很难过的。如果没有英语的“思维“靠学校教的阅读理解给你全文翻译也没用

引用
评论
11
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
高氯酸铵
1年8个月前 修改于 1年8个月前 IP:北京
917608
引用悟死参玄发表于7楼的内容
别的不好说,至少英语专业仅靠翻译是很难过的。如果没有英语的“思维“靠学校教的阅读理解给你全文翻译也没...

理想翻译软件能解决几乎所有的外语问题,因为翻译成母语后就没有思维问题了。实际翻译软件也能解决绝大部分,翻译软件的外语水平好于绝大部分人。


引用
评论(4)
1
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
章鱼wheat作者
1年8个月前 IP:江西
917618
引用高氯酸铵发表于8楼的内容
理想翻译软件能解决几乎所有的外语问题,因为翻译成母语后就没有思维问题了。实际翻译软件也能解决绝大部分...

我感觉如果是作弊难度的话英语和软件开发难度都快类似了,英语如果直接用一键翻译很容易出现类似于"爱来自瓷器"那种,如果像那种选择题就单个单词,一键翻译就会翻译出一个常用的与之对应的中文单词,尽管这个还有很多个不同的意思,当然应对方法就是不用一键翻译,去搜索单个单词,一个一个看释义进行比较,本质也是搜索,而软件开发的题目很显然前6题和最后一题一般人都能非常轻松通过搜索或者自己判断得出。如果是60分很显然,已经非常容易的通过了,如果是80分的话其余的只要蒙几次,蒙对一个就算通过了,当然其余的也是能通过搜索得知的不过难度相对更高一点.英语也不是单纯的英语,有一部分题目就是别的专业的问题翻译成了英语,本质上就是你在答别的专业的题目,就只是翻译成英语了,单纯通过语言逻辑是不能成功答题的,解决办法依旧可以通过搜索,不过也是如你所说,翻译软件也能解决绝大部分.既然本质都是搜索个人感觉软件开发的难度甚至会低于英语.

引用
评论(1)
1
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
悟死参玄
1年8个月前 IP:浙江
917624
引用高氯酸铵发表于8楼的内容
理想翻译软件能解决几乎所有的外语问题,因为翻译成母语后就没有思维问题了。实际翻译软件也能解决绝大部分...

比方说那道“以下哪个名字更像侵略者的”这道题靠翻译该怎么过?

其实我觉得考的更多的是本土素养

引用
评论(1)
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
Company_Inspector
1年7个月前 IP:陕西
917961
引用悟死参玄发表于10楼的内容
比方说那道“以下哪个名字更像侵略者的”这道题靠翻译该怎么过?其实我觉得考的更多的是本土素养

是的,我就被那道题卡了

引用
评论
3
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
章鱼wheat作者
1年7个月前 IP:江西
917977

又恢复答题了,继续测试了6门,只有一门为全chatgpt回答无任何修改,且成功通过的,科目为机器学习.英语chatgpt居然也不能成功通过

英语:

英语.png

第三题ai说全都不适合儿童,所以第三题为自选

儿童.png

第四题ai是直接从记者的特征分析的并非联系了历史,而第二次重新问变成了slow

,第五题它说:因为“ Dick”是“ Richard”这个名字的常见昵称,所以用这个昵称称呼一个叫这个名字的人是合适的。然而,用“混蛋”这个词来指代其他人,比如警察、老板或者小偷,是不尊重和不恰当的。 

实属离谱

迪克.png


第八题问了两次结果为不同,第一次是scurb,第二次为brush,第二次解释为另外三个为俚语

第九题解释如下

1LW)YIQMP[SYS9V4C1J9ERT.png

3D打印

3D.png

未通过

机器学习

机器.png

通过

高能材料

高能.png

未通过

农业技术

农业.png

未通过

民航知识

民航.png

未通供

以上仅供参考


引用
评论(1)
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
章鱼wheat作者
1年7个月前 IP:江西
918137

两题.png

化学前两题为图片,随便写的答案,其余为chatgpt回答,3D打印为全chatgpt答题

引用
评论
2
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
三水合番
1年7个月前 IP:四川
918143

前两天GPT4发布了,听说应试能力有很大加强。

现在还只有chatgpt的付费会员能用,有没有坛友买了这个会员?可以再试一遍楼上那些没通过的科目,看看还有几科能幸存下来😂

引用
评论
1
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
章鱼wheat作者
1年7个月前 IP:江西
918144

才发现我有newbing资格了,等等我试试newbing回答 1678945162384.png

引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
章鱼wheat作者
1年7个月前 IP:江西
918145

newbing目前只能一次回答一题,且有标明信息来源

1678945525955.png

30265439835b09d6f2f908ad5b6c094.png

引用
评论(1)
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
Vanguard_Marx
1年6个月前 IP:福建
919843
引用虎哥发表于4楼的内容
您怎么做是您的自由,但不可以说嘛。证据确凿,根据《增规》第9.1款“在科创设立的考试中舞弊的”,进行...

姜太公不钓鱼——不请自来

引用
评论
2
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
狼元星
1年5个月前 IP:湖南
920882
引用xa87发表于2楼的内容
考试通过恭喜您通过了 计算机科学 专业级 考试。哈,谢谢楼主,之前一直没想起来用。

牛啊,自曝

引用
评论
1
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
TonyStark
1年4个月前 IP:江苏
922237
引用虎哥发表于1楼的内容
从有限的例子可以看出,chatgpt几乎从不做真正的逻辑判断,尽管其回答看起来层层递进,很讲逻辑。公...

我感觉吧gpt基本的逻辑判断还是有的。答公共题需要理解文字语境,可能包含的情感意向,潜在的主流价值观问题,还有一些国内网络调侃,以至于gpt给出的回答都很笼统。

我提问过gpt很多逻辑问题包括逻辑嵌套难题。包括难且经典的三神问题,全部能回答。但其手段估计很多是由于经典问题大数据能找到现成解答。这一点在我询问自己编的较难逻辑题它不能准确回答可以证明。另外简单的逻辑题它自己完全可以判断准确

另外关于gpt的学术能力,就计算而言没什么逻辑。我尝试教它高等代数和泛函的一些计算原理,大数据不容易找到的就不会。大量教学后才可以解一些题(这个其实很不错)。其实就是个能理解简单语言结构然后做简单处理的高等计算器和浏览器的结合体,出错概率还极高的那种,你知道它说错了告诉他它还能脸都不红告诉你不好意思对不起你是对的那种。不过准确度无关紧要的话,确实能加快一定的搜索比对效率。我让他比对上世纪小日子产的两台古董相机的性能,找资料还是比亲手搜快很多

感觉上可能是这样,gpt


引用
评论
3
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
客星晨出东方
1年3个月前 IP:浙江
922712

image.png 部署在本地的chatGLM2-6b模型解决了帅哥衬衫问题

引用
评论(3)
1
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
客星晨出东方
1年3个月前 IP:浙江
922831

image.png 云梯车

引用
评论(3)
1
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
客星晨出东方
1年3个月前 IP:浙江
922855

image.png 手机基站他不会

引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
客星晨出东方
1年3个月前 IP:浙江
922856

image.png 吃辣椒也不会

引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
客星晨出东方
1年3个月前 IP:浙江
922857

image.png 核电站也不会

引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
三水合番
1年3个月前 IP:四川
922872
引用客星晨出东方发表于20楼的内容
部署在本地的chatGLM2-6b模型解决了帅哥衬衫问题

6b的参数量还是太少了,参数少性能就上不去。huggingface的排行榜里,chatglm2-6b的排名还是差点意思

XXXXXXXXXXXXXXXXXXXXXX/spaces/HuggingFaceH4/open_llm_leaderboard 

image.png

image.png

最前面的模型平均得分在60多,chatglm2-6b是48.2。

大尺寸模型砍精度之后,消费级显卡的内存也能够用。比如有人用4bit量化的mpt30b,只需要大约20GB内存,层主有兴趣的话可以试试

image.png

XXXXXXXXXXXXXXXXXXXXXX/TheBloke/mpt-30B-instruct-GGML 

另外在类似尺寸的开源模型里,也有不少能超过chatglm2-6b的,也可以试试


引用
评论(1)
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
三水合番
1年3个月前 IP:四川
923237
引用三水合番发表于25楼的内容
6b的参数量还是太少了,参数少性能就上不去。huggingface的排行榜里,chatglm2-6b...

llm的进展速度真是快的吓人,才过了一个礼拜,之前排名第一的模型,现在在排行榜的第一页上都快看不到它了😂

image.png

比较讨厌的是,这些排名高的模型几乎都是不支持中文的,或者中文性能很差。看来我国近年来在净化网络环境上的努力,最终是取得了伟大胜利了 sticker

引用
评论
3
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
爷奈我何已黑化
1年2个月前 IP:广东
924720

用这个查一些考试时相关的知识特别好用

引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论

想参与大家的讨论?现在就 登录 或者 注册

所属专业
所属分类
上级专业
同级专业
章鱼wheat
进士 机友 笔友
文章
19
回复
274
学术分
0
2022/10/23注册,20分23秒前活动

年龄:2007-09-0* <h1 style="font-size: 150px;">大</h1> <h1 style="font-size: 10px;">小</h1> <div class="article-panel-count"><div class="fa fa-thumbs-up"></div><span>9999</span></div> <img src="XXXXXXXXXXXXXXXXXXXXXXXX:81/sticker/315491"> <button class="btn btn-primary">测试</button> <button class="m-b-05 m-r-05 btn-sm btn-default btn">测试</button> <a class="pointer" onclick="document.write('')">测试</a> <label><input type="checkbox" value="11"><span>测试</span></label>

主体类型:个人
所属领域:无
认证方式:手机号
IP归属地:江西
文件下载
加载中...
{{errorInfo}}
{{downloadWarning}}
你在 {{downloadTime}} 下载过当前文件。
文件名称:{{resource.defaultFile.name}}
下载次数:{{resource.hits}}
上传用户:{{uploader.username}}
所需积分:{{costScores}},{{holdScores}}下载当前附件免费{{description}}
积分不足,去充值
文件已丢失

当前账号的附件下载数量限制如下:
时段 个数
{{f.startingTime}}点 - {{f.endTime}}点 {{f.fileCount}}
视频暂不能访问,请登录试试
仅供内部学术交流或培训使用,请先保存到本地。本内容不代表科创观点,未经原作者同意,请勿转载。
音频暂不能访问,请登录试试
支持的图片格式:jpg, jpeg, png
插入公式
评论控制
加载中...
文号:{{pid}}
投诉或举报
加载中...
{{tip}}
请选择违规类型:
{{reason.type}}

空空如也

加载中...
详情
详情
推送到专栏从专栏移除
设为匿名取消匿名
查看作者
回复
只看作者
加入收藏取消收藏
收藏
取消收藏
折叠回复
置顶取消置顶
评学术分
鼓励
设为精选取消精选
管理提醒
编辑
通过审核
评论控制
退修或删除
历史版本
违规记录
投诉或举报
加入黑名单移除黑名单
查看IP
{{format('YYYY/MM/DD HH:mm:ss', toc)}}