-
โรงเรียนกฎหมายมหาวิทยาลัยมินนิโซตาให้ ChatGPT สอบโรงเรียนกฎหมายกับนักเรียนจริง
-
แชทบอทเป็นนักเรียนระดับ C ที่มีความถนัดทางการเขียนข้อความแบบปรนัยมากกว่า
-
รองศาสตราจารย์ Jon Choi กล่าวกับ Insider ว่าโรงเรียนกฎหมายอาจต้องปรับหลักสูตร
อาจารย์โรงเรียนกฎหมายแห่งมหาวิทยาลัยมินนิโซตากลุ่มหนึ่งให้บอท AI ChatGPT ทำแบบทดสอบกับนักเรียนจริง 4 ครั้ง และพบว่าหุ่นยนต์ซึ่งถือเป็นตัวอย่างที่ทันสมัยที่สุดในโลกของ AI ที่มีประสิทธิผลคือนักเรียน C บนกระดาษ
สงสัยว่าจะใช้ ChatGPT เพื่อโกงนักเรียนและช่วยครูในการสอนได้อย่างไร อาจารย์จึงตัดสินใจทดสอบความสามารถของ ChatGPT
Jon Choi อาจารย์โรงเรียนกฎหมายทำข้อสอบผ่าน ChatGPT จัดรูปแบบใหม่ให้เหมาะกับข้อสอบ และนำข้อสอบที่ได้มาผสมกับข้อสอบของนักเรียน
จากข้อมูลของ Choi ChatGPT ได้รับค่าเฉลี่ย C+ และ “เกรดต่ำแต่สอบผ่าน” ในกฎหมายรัฐธรรมนูญ สวัสดิการพนักงาน ภาษี และการละเมิด (เขาเป็นนักเรียนอันดับที่ 36 จากทั้งหมด 40 คนที่ Con Legislation, อันดับที่ 18 จาก 19 ในด้านสิทธิของพนักงาน, อันดับที่ 66 จาก 67 ในด้านภาษี และอยู่ในอันดับที่ 75 จากนักเรียน 75 คนที่ Torts ตามกระดาษ).
มีประสิทธิภาพดีกว่าคำถามปรนัยในบทความ โดยเฉพาะอย่างยิ่งบอทมีประสิทธิภาพต่ำในคำถามปรนัยที่เกี่ยวข้องกับคณิตศาสตร์”ซึ่ง ChatGPT วางระเบิด“
เขาสามารถอ่านกฎทางกฎหมายในบทความและอธิบายกรณีได้อย่างถูกต้อง (โดยไม่ต้องอ้างอิง) แต่ล้มเหลวในการ “ตรวจหาปัญหา” และให้เหตุผลหรือการวิเคราะห์อย่างลึกซึ้ง ชอยกล่าว
ในบรรดาผู้ประเมินสามคนในการทดลองที่ให้คะแนนการทดสอบแบบสุ่มสี่สุ่มห้า อย่างน้อยสองคนบอกกับชอยว่าพวกเขาเดาออกว่าข้อสอบใดมาจาก AI และพวกเขาก็พูดถูก ตัวอย่างเช่น การตอบสนองของ ChatGPT ใช้ไวยากรณ์ที่ยอดเยี่ยมและซ้ำซ้อนมากขึ้น (ผู้เขียนร่วมของ Choi — Kristin E. Hickman, Amy Monahan และ Daniel Schwarcz — แสดงเป็นนักเรียนระดับประถมสามคน)
สำหรับตอนนี้ การแยกแยะความแตกต่างในการสอบนั้นค่อนข้างง่าย “ฉันคิดว่าอาจารย์มักจะทำให้ถูกต้อง” เขาบอกกับวงใน อย่างไรก็ตาม แบบร่างคร่าวๆ ที่สร้างโดย ChatGPT ซึ่งนักเรียนแก้ไขนั้น “ตรวจพบได้ยากกว่ามาก” เขากล่าว
ในขณะที่การสอบได้รับการจัดอันดับเป็นเส้นโค้งและ ChatGPT ได้รับการจัดอันดับให้เป็นหนึ่งในนักเรียนที่แย่ที่สุดในชั้นเรียน Choi กล่าวว่าเขาเชื่อว่านักเรียนโรงเรียนกฎหมายมหาวิทยาลัยมินนิโซตาต้องเผชิญกับการแข่งขันที่ค่อนข้างรุนแรง 97% ของผู้สอบครั้งแรกผ่านการสอบ Minnesota Bar โดยมหาวิทยาลัยและอัตราการผ่านสำหรับผู้สำเร็จการศึกษากฎหมายมินนิโซตาที่เข้าศึกษาในบาร์เป็นครั้งแรกในฤดูใบไม้ร่วงปี 2020 คือ: ดีที่สุดอันดับสามของประเทศหลังฮาร์วาร์ดและเยล
“ฉันบอกได้เพียงว่าด้วยความรู้ด้านกฎหมายและความสามารถในการสังเคราะห์และโต้แย้งทางกฎหมาย นักเรียนของมินนิโซตาจะเป็นคนที่เก่งที่สุดในประเทศ” ชอยบอกกับวงใน “ChatGPT ทำผลงานได้ระดับล่างสุดของชั้นเรียน โดยนักเรียน 99% จะสอบผ่าน นักเรียนเกือบทุกคนจะประสบความสำเร็จในอาชีพการงาน ดังนั้นจึงเป็นการเปรียบเทียบที่ยาก” ในขณะที่ผลลัพธ์จะเป็นอย่างไร ทำให้ ChatGPT อยู่ภายใต้การกำกับดูแลด้านวิชาการก็ยังดีพอที่จะได้รับปริญญาทางกฎหมาย
“โดยรวมแล้ว ChatGPT ไม่ใช่นักศึกษากฎหมายที่เก่งอย่างเดียว” ชอยกล่าว ทวีตเมื่อวันที่ 23 มกราคม“แต่เราหวังว่าการทำงานร่วมกับผู้คน รูปแบบภาษาเช่น ChatGPT จะเป็นประโยชน์อย่างมากสำหรับนักศึกษากฎหมายและผู้ปฏิบัติงานในการสอบ”
Choi เชื่อว่า ChatGPT สามารถเป็นประโยชน์ต่อนักเรียนและเพื่อนร่วมงานของเขาหากใช้อย่างตั้งใจ ชอยใช้สิ่งนี้ในการเขียนโค้ดสำหรับสถิติและกราฟของหนังสือพิมพ์ และ ฉันพูดว่า มันใช้งานได้ “ดีมาก” และระบุว่า “สร้างโค้ดอย่างง่ายที่เขียนลำบาก (เช่น การบูตสแตรปค่า p การแสดงกราฟกริด)”
ในขณะที่มีโรงเรียนเทศบาลบางแห่ง ห้าม ChatGPTครูบางคน นำมาเป็นเครื่องมือทางการศึกษา.
แทนที่จะแสร้งทำเป็นว่าไม่มี ChatGPT ชเวมุ่งเน้นไปที่วิธีที่โรงเรียนกฎหมายสามารถปรับตัวให้เข้ากับสภาพแวดล้อมที่เปลี่ยนแปลงได้ ในการทำเช่นนี้ อาจารย์อาจต้องข้ามการสอบที่ทดสอบความรู้พื้นฐานทางกฎหมายโดยทั่วไป
“หากทนายความเริ่มใช้เครื่องมือเหล่านี้เพื่อเพิ่มความสามารถในการเป็นทนายความ เราจำเป็นต้องเปลี่ยนการสอนและการทดสอบของเราตามนั้น” Choi กล่าวกับ Insider
“เมื่อพวกเขาคิดค้นเครื่องคิดเลข พวกเขาไม่ได้บังคับให้นักเรียนทำคณิตศาสตร์ด้วยมือ” ชอยกล่าว “พวกเขาปล่อยให้ใช้เครื่องคิดเลขและเพิ่งเปลี่ยนลักษณะของการสอบ ดังนั้นฉันคิดว่านั่นเป็นหน้าที่ของการศึกษาด้านกฎหมาย”
OpenAI บริษัทที่รับผิดชอบ ChatGPT เพิ่งเปิดตัว น้ำตา ‘การลงทุนพันล้านดอลลาร์’ จาก Microsoft. ในการโพสต์ บริษัท ฉันพูดว่า การลงทุน “จะช่วยให้เราสามารถดำเนินการวิจัยอิสระต่อไป และพัฒนาปัญญาประดิษฐ์ที่ปลอดภัย มีประโยชน์ และทรงพลังมากขึ้นเรื่อยๆ”
เคล็ดลับทางอีเมลสำหรับทุกสิ่งที่ต้องทำทางออนไลน์ mleighton@insider.com.
อ่านบทความต้นฉบับ คนวงใน
#โรงเรยนกฎหมายแหงมหาวทยาลยมนนโซตาทดสอบ #ChatGPT #ในการสอบ #เปนนกเรยน
