B科技 b体育ChatGPT通过美放射学委员会考试—新闻—科学网 来源:B企业 发表时间: 2024-05-02

科技日报北京5月17日电(记者刘霞)加拿年夜科学家于16日出书的《放射学》杂志上登载新论文称,最新版本的ChatGPT经由过程了美国放射学委员会的测验,凸起了年夜型言语模子的潜力,但它也给出了一些过错谜底,注解人们仍需对于其提供的谜底举行核查。

为评估ChatGPT于美国放射学委员会测验问题上的体现并摸索其上风以及局限性,多伦多年夜学研究职员起首测试了基在GPT-3.5的ChatGPT的体现。研究团队使用了150道选择题,这些选择题与加拿年夜皇家学院以及美国放射学委员会测验的气势派头、内容以及难度相称。这些问题不包孕图象,分为低阶(常识回忆、基本理解)以及高阶(运用、阐发、综合)思维问题。高阶思维问题可进一步细分为影像学体现描写、临床治理、计较以及分类、疾病联系关系。

研究职员发明,基在GPT-3.5的ChatGPT的准确率为69%,靠近70%的合格线。该模子于低阶思维问题上体现相对于较好,准确率为84%,但回覆高级思维问题时体现欠安,准确率仅为60%。而机能更优秀的GPT-4的准确率为81%,且于高阶思维问题上的准确率为81%,远好过GPT-3.5。但GPT-4于低阶思维问题上的准确率仅为80%,答错了12道题,而GPT-3.5全数答对于了这些标题问题,这激发了研究团队对于GPT-4网络信息的靠得住性的担心。

这两项研究都注解,ChatGPT会有提供不准确谜底的偏向,假如仅仅依b����赖它获守信息,很是伤害,由于人们可能意识不到其给出的谜底是禁绝确的,这是它今朝面对的最年夜的问题。

出格声明:本文转载仅仅是出在流传信息的需要,其实不象征着代表本消息网不雅点或者证明其内容的真实性;如其他媒体、消息网或者小我私家从本消息网转载使用,须保留本消息网注明的“来历”,并自大版权等法令义务;作者假如不但愿被转载或者者接洽转载稿费等事宜,请与咱们联系。/b体育

上一篇:b体育研究阐明交通型空气污染给呼吸系统带来多种伤害—新闻—科学网 下一篇:b体育对抗“最毒”乳腺癌有了精准“侦察兵”—新闻—科学网