인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
현재 4등급이고, 제 문제점은 수학 모고를 풀 때 시간이 너무 부족해요...
-
거리곱 칼럼 1
은 내년에 공개하겠읍니다 어차피 지금 새로운 관점을 받아들이는건 혼란스럽고 회의감...
-
등급컷보고 희비가 교차했던게 엊그제 같았는데
-
25형은 나가있어
-
맨날 이상한거만 내 파리어클락도 ㄱㅊ긴한데 다이스엘범 쿨이랑
-
아직 못 본 게 한가득
-
6,9둘다 92인데 이감만 3연속 70중반이 말이 되냐… 하.. 펴야겠다 (책을)
-
왜이렇게 수능공부 다시하면 1은 그냥 띄울 것 같고 근자감에 넘치는 건지 모르겠네
-
강케이 서바 다 풂 실모를 고루 등용 ㅇㅇ
-
모집정지 진짜 가능함?
-
9AAA9 2
9AAA9
-
이번 9모 확통 80나왔는데 드릴은 많이 어렵데서 혹시 다른 n제가 나을까요?...
-
국어 시험을 못 봤지만 멘탈이 안 흔들리고 끝까지 공부 마무리할 수 있게 해주셔서...
-
너무 실모만 풀었어 근본으로 ㅋㅋ
-
오늘부터 공부한 내용or시간 간단하게 오르비에 정리해서 글 올릴려고 합니다 현재까지...
-
응애
-
머머잇음
-
오늘 빡공 함 0
후하하
-
이건 책을 복습해야함 아니면 실모를 풀어제껴야함? 아예 몰라서 못푼다기보다...
-
N제 순서 2
샤인미/설맞이/4규s2 난이도는 다들 다르게 말씀하시는 거 같은데... 올해거...
-
진짜 모집정지 된다고 한들 저정도까지 영향이 가겠나...개소리를 정성스레 적어놨네
-
서울캠에 정디플만 공대임? 너무 비효율적이지 않나
-
미적 엔제 하나도 안풀음 ㅁㅊ것… 엔티켓이랑 4코시즌1 생각중인데 뭐 먼저 풀까요
-
2330 맛잇네 2
ㄹㅇ 김성은은 신의 아들이다 불꽃n제 불찍파도 딱 기다려:)
-
하루에 한지 100문제라... 이기상과 한몸이 되는중
-
난이도 어느정도지..
-
ㅇㅇ
-
검정고시생이라 점공이 아예 안되는데 같은 곳 넣은 사람들 성적 대충 어느정도인지...
-
3등급인데 수리논술 제대로 해본적 없는데 파이널 수업 듣는게 나을까여 아님 기출이랑...
-
강k 사문 2회 2
20번 너무 어렵…
-
국어는 수능장 가봐야 아는거 알지만 진짜 고정1이라 자신있습니다 수학은 60점대...
-
슬슬 친구들 인스타에 연고전관련 스토리 올라오는데.. 7
볼때마다 작수 국어시간이 너무 후회스럽네 선택과목 마킹만 했다면 나도 저기서 같이...
-
조언 부탁드려요 6
•영어 1~2 목표 23수능 1 8덮, 9모 2 불안정, 진짜 가끔은 3도...
-
질문 성의없는거 아는데 ㄹㅇ 뭘해야될지모르겠ㅇ.ㅁ
-
맞팔구 7
은테가 101명부터였네;;
-
불행할 사람은 뭘해도 불행할듯 삶에선 마인드가 가장 중요한듯함요
-
의대 수시 0
의대 수시런데 저희학교가 과중이거든여? 그래서 R&E 하게되는데 재활의학쪽으로...
-
Ps 대체 왜 잼민 친구 둘은 이 시간까지 독서실에서 겜을 하고 있는가..
-
개인적으로 느끼는 약술형고사 악질 2문제(국어 1문제, 수학 1문제) 2
2022학년도 가천대학교 자연 시간 없어 죽겠는데 계산만 주구장창 2023학년도...
-
화2 어나클 2
화2러입니당 어나클 사놓고 좀 보다가 안 보고 있는데 보면서 얻어갈 게 많은가요?...
-
내가 한 행동에 대해선 책임질께 내가 책임지고 살아가면 돼
-
32수능 만점자 질받 38
아무거나 ㄱㄱ
-
전신 거울에 대고 뽀뽀해봐요 자기애 듬뿍듬뿍 주입 가능 실제로 애용합니다
-
은 무슨 내일 스러너 풀 생각에 잠이 안오네
-
나도 질받메타 탑승! 19
ㄱㅂㅈㄱ
-
에에
-
고환 컷 7
고려대 환경생태공학부 컷 궁금합니다
-
질문 받음 6
클났음 그불구 듣고 총정리 과제도 해야댐 알바갈걸 생각 안하고 계획짠 자의 최후..
-
내가 과탐을안해봤는데 과탐선택 팁달라고해서 1. 일단 내가 과탐 공부를 한적이없는...
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.