인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://w.orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
독립운동가를 고르시오 한번 메인가보고 싶어요 답은 오후5시에 글올림
-
좀 에반디 주말은 오전~점심 도서관갈가 ,,,
-
얼버기 2
-
더워서 깻다 ㅡㅡ...
-
저런일러다어디서나오는건가요...
-
의미없나요? 적중예감 시즌프리 김승모 2,3회차 킬캠 6평대비 등등이요
-
확실히 밀어주는 과랑 안 밀어주는 과랑 교수진 차이가 너무 심한 대학이 있는데...
-
얼리버드 기상 0
라면끓여먹어야징
-
기차 지나간당 11
부지런행
-
부산->대치 3
srt 첫차가 간다
-
이상형토크 1
위에있을수록 중요함 투머치토커 좋음 : 말 끊기면 안됨 연상누나느낌 (~+2) :...
-
영어 수특 듣기 실전 3회 7~12번 사문 수특 챕터 5~6 수완 챕터 5~6
-
5시반기상인데 1
이미 자긴 그른듯
-
자랴지
-
밤샐까
-
화학 유기할까 1
외고 자퇴생인데 사탐 노잼+화학 미련으로 과탐에 뛰어들었거든요.. 재미는 있는데.....
-
사문때문에 이제서야 두번째 사탐 시작하려고요 ㅠㅠ 한지 고인물들 많나요? 암기는...
-
수도권에서 경비 저렴하게 다녀올까 하는데 해변 근처 지방 있을까요?? 왕복 10만원...
-
1. 고체, 유체, 천체 각 4주씩 12주 배포 2. 매주 화요일 18시 업로드...
-
누가 자꾸 올리니까 관심이 가네.. 재밌어보임.. 학교에서 돌 관찰 수행도 재밌긴했었지..흠..
-
약간 사투리쓰면 +a 이유는 귀여움. 그거뿐.. 사투리 안 쓰려하던데 어차피 술...
-
자는시간빼곤전부한게임만합니다...
-
진짜임 제가 지구 살아서 잘 앎
-
하아... 다 내 업보다
-
아뇨 도넛 모양인데요
-
과외 계속 진행해도 괜찮을까요? 성격은 좋으시고 잘 가르치세요ㅠ
-
잠이나 자러 가라 게이야.
-
음
-
ㅇㅇ??
-
뉴비에용
-
나중에 풀죠 머.. 생존자 5도 안되는듯
-
오늘의 영화 한줄평 : 에브리씽 에브리웨어 올 앳 원스 1
별점 ⭐️⭐️⭐️⭐️⭐️ 여러모로 내 인생을 바꿀 듯한 예감이 드는 영화 하지만...
-
메이드카페 3
저 가봤어요 썰 풀까
-
춤이고 나발이고 오늘 하루, 피부, 컨디션 등등 망칠 수 있으니 얼른 디비 자야지
-
어 다들 못자 자지마
-
너만 오면 ㄱ
-
아무도 없나? 3
조회수 체크
-
너만 오면 ㄱ
-
진짜 안경은 사회악 15
공부중이라 추레한거 양해좀.. 저건 좀 적어보이는데 눈 크기 차이가 개심해요.....
-
내 목표 6
24년 수능 잘보기 25년 설전정 입학해서 1학년동안 학점 잘 챙기고 공군이나...
-
올해 잘 풀려서 연고대 문과 간다해도 전문직 달고싶으면 최소 2 3년동안 또...
-
일단저임
-
맨날 하던데
-
영화든 드라마든 제대로 볼 수 있는게 없어요. 요즘 나오는 드라마들은 죄다 스토리가...
-
제발... 아니면 설물천 가서 탈릅한 모 옵붕이 찾아가서 밥 사달라고 한다음 복전이라도...
-
SKY 안쓰고 6메디컬 15
내신 1점 중반인데 학교 쌤은 전부터 서울대 쓰라는 식으로 유도하는데 서울대...
-
내일 강k네 0
으아아아아아악
-
여부이 졸려
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
![](https://s3.orbi.kr/data/emoticons/dangi/035.png)
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.