美國伊利諾伊理工大學(xué)-芝加哥肯特法學(xué)院在官網(wǎng)發(fā)布了消息，GPT-4通過了統(tǒng)一律師資格考試。該考試一共7項，GPT-4在民事訴訟、合同法、刑法、物權(quán)法、證據(jù)法5個學(xué)科考試中，得分率高于人類考生。
芝加哥肯特法學(xué)院的Daniel Martin Katz教授與多位業(yè)內(nèi)專家合著了一篇名為《GPT-4 Passes the Bar Exam》的論文并發(fā)表在SSRN上，深度剖析了多模態(tài)大語言模型GPT-4，在復(fù)雜的法律推理方面有著非常出色的表現(xiàn)，這對法律界產(chǎn)生了深遠的影響。（論文地址：https://papers.ssrn.com/sol3/papers.cfm?abstract_id=4389233）
值得一提的是，從2019年開始GPT家族的其他大語言模型就開始挑戰(zhàn)統(tǒng)一律師資格考試，但7項考試成績非常差全部沒有通過。
本次GPT-4考試的平均得分率為75%，高于平均的68%，整體排名高于90%考生，總得分為297分。即便是放在錄取門檻最高的亞利桑那州（273分）和伊利諾伊州（266分），GPT-4依然能輕松通過考試。
官方消息
大語言模型GPT系列在如此短的時間獲得神速進步，讓Daniel教授非常震驚。他表示，對于人類來說掌握專業(yè)的“法律術(shù)語”是一件極其困難的事情，還要用非常嚴謹?shù)倪壿媮砘卮饐栴}，可AI機器人非常輕松地做到了這些。
Daniel教授特別指出，民事訴訟在律師資格考試中一直是相當難考的一個項目，很多學(xué)生考生、大語言模型在該學(xué)科的考試表現(xiàn)很不理想，而GPT-4以出色的推理獲得了絕佳的表現(xiàn)。
此外，GPT-4不僅參加了選擇題，還參加了作文等較難的考試題。其自動生成的答案與標準優(yōu)秀答案幾乎一樣，并且“胡說八道”的情況也越來越少，這是GPT家族其他模型所無法做到的。
Daniel Martin Katz教授
在Daniel教授發(fā)布的《GPT-4 Passes the Bar Exam》論文中顯示，除了GPT-4之外，早在2019年，GPT家族的GPT-2、ChatGPT TEXT-DAVINCI-003、TEXT-DAVINCI-001、TEXT-CURIE-001、TEXT-BABBAGE-001、和TEXT-ADA-001參加了同樣的統(tǒng)一律師資格考試。
不過全軍覆沒，尤其是GPT-2第一次參加考試幾乎全部回答錯誤。這也就是說，GPT-4確實是GPT家族里目前最強的模型。
在具體科學(xué)考試得分率方面：
- 民事訴訟GPT-4得分率61.1%，人類考生59%；
- 憲法GPT-4得分率69.4%，人類考生72%；
- 合同法GPT-4得分率88.1%，人類考生70%；
- 刑法GPT-4得分率81.1%，人類考生71%；
- 證據(jù)法GPT-4得分率85.2%，人類考生65%；
- 物權(quán)法GPT-4得分率79.7%，人類考生65%；
- 侵權(quán)行為法GPT-4得分率64.9%，人類考生71%。
一共7項考試，GPT-4有5項全面領(lǐng)先人類考生，其中，合同法、證據(jù)法大幅度領(lǐng)先。而之前的ChatGPT、GPT-3.5連及格線都達不到。
左面為GPT-4每科考試平均分，右側(cè)為學(xué)生平均考分
在《GPT-4 Passes the Bar Exam》論文中「AIGC開放社區(qū)」還發(fā)現(xiàn)一個驚喜，早在2022年7月GPT-4就參與了統(tǒng)一律師資格考試，這也就是說Open AI已經(jīng)在去年就完成了GPT-4的研發(fā)與訓(xùn)練。
Daniel教授表示， GPT-4展現(xiàn)出了前所未有的強大功能，這對于法律界來說是一把雙刃劍。如果法官、律師、立法者合理的運用GPT-4，那么整個法律界的工作效率將獲得極大提升。同時對法律教育也產(chǎn)生了很大的影響，將幫助學(xué)生快速查找各種法律資料，為學(xué)習(xí)帶來很大的便利。
關(guān)于美國律師資格考試
美國律師資格考試是按州來劃分，每個州的司法都是獨立的，都有自己的律師資格考試。一般考試內(nèi)容包括：合同法、侵權(quán)行為法、憲法、刑法、證據(jù)法、民事訴訟和物權(quán)法7個大項。通常有五分之一的考生無法一次通過，整個考試過程相當有難度。
關(guān)于芝加哥肯特法學(xué)院
芝加哥肯特法學(xué)院成立于1888年，隸屬于伊利諾伊理工大學(xué)。芝加哥肯特法學(xué)院位于美國第三大法律市場，處于法律行業(yè)的前沿，為學(xué)生提供出色的法律教育和大量實踐機會。