cover of episode 我们用执业医师考试题考了考ChatGPT,结果......

我们用执业医师考试题考了考ChatGPT,结果......

2023/3/4
logo of podcast 细管胡同

细管胡同

Frequently requested episodes will be transcribed first

Chapters

Shownotes Transcript

本期节目我们用22道执业医师考试题测试了ChatGPT。试题涉及解剖学、病理学、药学等不同领域,同时,我也尝试了不同的提示(prompting)方式。我们认为ChatGPT没能通过我们的测试。另外,我们还简单介绍了ChatGPT的原理和用法,并讨论对科技、文学、教育等领域可能带来的影响。我们认为ChatGPT是一个比搜索引擎更强大的工具。

主要内容

2:47 对ChatGPT的态度大致可以分为“降临派”、“拯救派”、焦虑派和蹭热度派

10:45 用执业医师考试真题测试ChatGPT

13:15 提示词中的“症状”二字影响了ChatGPT给出的答案

14:43 ChatGPT的“和稀泥”

20:51 ChatGPT在药学领域问题的表现

21:51 ChatGPT在处理一个英语名词的不同译法时出现了错误

37:32 ChatGPT在营养学问题方面的表现

41:41 ChatGPT在一个传染病学问题上出现常识性错误

43:35 在提示中增加了一点点误导,并没有影响ChatGPT给出正确答案

45:36 ChatGPT在22道执业医师考试题中答对了12道题

50:02 ChatGPT的基本原理

55:29 提示工程(prompt engineering)的一些心得体会

56:59 过程提示

59:34 角色提示(role prompting)

1:03:23 客观性问题

1:05:10 无所不能的“打油诗接口”

1:06:43 ChatGPT的应用场景

1:14:11 ChatGPT对科技、文学、教育等领域可能带来的影响

1:16:02 标准化考试可能将走向终结

1:17:24 标准化考试的历史

1:22:28 “AI 带来的真正结果:给人类增负?”

1:25:48 ChatGPT能否取代人类?

1:27:05 ChatGPT的胡编乱造的问题有时候会很严重

参考资料

- ChatGPT背后模型被证实具有人类心智!知名学者:“这一天终于来了”)

- ChatGPT 大战司法考试)

- 被 ChatGPT “霍霍”的文学界:由AI编写的投稿激增,17岁老牌杂志宣布暂停征稿)

- ChatGPT写出的文章,版权归我还是归它)

- ChatGPT 能帮我们免费看病吗?答案可能出乎你意料)

- ChatGPT已经开始取代人类员工)

- ChatGPT通过了美国执业医师资格考试,但它在未来几十年都没法代替医生问诊看病)

- 18万美元offer!ChatGPT通过谷歌L3入职测试,人类码农危?)

- 李沐讲GPT)

- Learn prompting)

本期歌单

- 鬼否 《拓麻歌子》

- 陈奕迅 《人工智能》

- Aiva,Aiva Sinfonietta Orchestra,Brad Frey《The Creation of Planet Earth》