엔젤스컨설팅팀 [1094952] · MS 2021 · 쪽지

2021-12-13 13:41:03
조회수 14,813

[엔젤스팀]문과생을 위한 현실적 배치표 The prism 실채점 + 석차 및 커트라인 추정의 수리적 근거

게시글 주소: https://ys.orbi.kr/00041636185




“엔젤스 컨설팅 팀의 석차 및 커트라인 추정의 수학적 근거”

The Prism ver 2.0에 붙여


수능시험 성적이 발표되고 전국 누적 석차백분위 (이하 누적석차, 누적) 에 관하여 추정하는 방법은 

크게 두 가지가 있습니다.


저희 엔젤스 컨설팅팀은 

(1)표본에 의한 귀납적 추정과 함께 

(2)반드시 이를 검증할 수 있는 연역적 추정을 개발하여 교차 검증하고 있습니다.


아래와 같은 추정 기법에 의하여 저희는 다음과 같은 효과를 얻을 수 있고, 항상 얻어 왔습니다.


  1. 수능 성적이 발표되자마자 표준점수 합에 의한 상위누적 1% 구간 추정

  2. 상위누적 1% 구간 추정을 바탕으로 다른 함수를 아래와 똑같이 만들어 상위누적 0.2%, 0.5%, 2.2%, 3.3% 등의 표점합에 의한 석차 구간 추정

  3. 이러한 상위누적별 구간 추정을 서로 연결하여 또다른 함수로 만들고,

  4. 3의 결과에 따라 만들어진 함수에 대학별 반영비율을 곱하여 생겨난 서로 다른 함수들을 서로 비교



위 1~4의 과정들 가운데 가장 핵심이 되는 제1번째 과정, 즉 ‘난도함수’ 에 대한 과정을 엔젤스 컨설팅팀 연구실에서 아래와 같이 공개합니다. 수능에 관련한 ‘입시통계’ 에, 적어도 저희 엔젤스 팀은 현존 활동하는 팀들 가운데, 저희가 가진 추정 능력과 기술에서는, 일부는 ‘유일’하고, 대부분 독보적인 수리적 근거를 가지고 있으며, 추정 결과에 약간의 오류가 있다하더라도 아래와 같은 수리적 근거에 의해 가장 먼저 신속하게 보정할 수 있다고 자부합니다.


엔젤스 컨설팅 팀 데이터팀 드림




난도함수에 관하여



수능에서 원점수를 그대로 반영하지 않고 표준점수를 사용하는 이유는 ‘선택과목별 난이도’나 ‘각 과목을 선택한 학생집단의 학력 수준’과 같은 특징들을 반영하여 점수를 교정해야 하기 때문입니다. 그래야 형평성에 관한 논란이 생기지 않지요. 이번 수능에서 활용하고 있는 국어와 수학의 조정원점수는 형평성 확보를 위한 더 적극적인 점수 교정 방법이라 할 수 있습니다.


이렇게 원점수를 표준점수로 변환한다는 것은 ‘절대평가’ 점수인 원점수를 ‘상대평가’ 점수로 바꾼다는 의미이고, 이는 곧 ‘내 과목 점수’가 아닌 ‘과목 내에서의 내 석차’가 반영된다는 의미로도 해석될 수 있습니다.


먼저, 다음과 같이 설정해 봅시다.

• 국어 1컷 표준점수 x

• 수학 1컷 표준점수 y (자연 : 미적분학 1컷 표준점수 / 인문 : 확률과통계 1컷 표준점수)*

• 탐구 1컷 점수 z(탐구영역 과목별 1컷 표준점수 평균을 2배한 점수)

• w=x+y+z


*기하는 누적석차에 영향을 끼치기에는 너무 모집단이 적음, 미적분으로 간주하고 계산


w는 각 과목별 1등급 컷 표준점수의 합(이하, 1컷표점합)입니다. 시험이 쉬울 경우 이 점수는 높아지고, 반대로 시험이 쉬우면 이 점수는 낮아집니다.

그리고 누적석차 1%에 해당하는 국수탐 표준점수합의 합(이하, 1%표점합)을 s라 하면,

s의 크기 또한 시험이 쉬울 경우 높아지고, 시험이 어려울 경우 낮아지게 됩니다.

다음은 이전 A, B, C학년도의 실제 수능 시험 결과를 활용하여 w와 s를 구한 것입니다.


*[아래의 점수는 편의상 원점수로 작성되어 있는데, 그 이유는 이 글을 작성할 때는 표준점수 값을 몰랐기 때문임. 실제로 활용되는 것은 아래의 원점수들에 해당하는 표준점수 합의 값들의 평균값]



국수탐

1컷표점합(w)

국수탐

1%표점합(s)

t(=s-w)

A학년도(쉬운 수능)

285

287

2

B학년도(보통 수능)

275

281

6

C학년도(어려운 수능)

255

279

24


위 표에서 흥미로운 사실을 한 가지 발견할 수 있습니다.

시험이 쉬울 경우 1%표점합(s)과 1컷표점합(w)의 차이는 매우 작고, 시험이 어려울수록 두 점수의 차이가 급격하게 커지게 됩니다.

그도 그럴 것이 시험이 쉬울 경우에는 상위권 학생의 점수가 매우 촘촘하게 배열되기 때문에 두 점수 차이는 매우 작아지고, 시험이 어려워질수록 상위권과 최상위권, 극상위권 학생들 간의 점수 차이가 급격하게 벌어지기 때문에 두 점수의 차이가 매우 커질 것이라는 점은 쉽게 예상할 수 있는 바입니다.


표의 네 번째 열에 나와 있는 1%표점합과 1컷표점합의 차이, 즉 (s-w)의 값을 t라 합시다.

이 t값은 매우 중요한 의미를 갖습니다. 왜냐하면 1컷표점합은 평가원의 발표를 통해 알 수 있지만 1%표점합은 그럴 수가 없기 때문입니다.

하지만 우리가 이 t값을 알아낼 수만 있다면 1%표점합을 알아낼 수 있습니다.


그렇다면 t값을 어떻게 알아낼 수 있을까요?

얼핏 보아 명확히 알 수는 없겠지만 w와 t 사이에 일정한 관계가 존재할 수도 있습니다.

만약 이 관계가 존재한다면 그것을 다음과 같은 함수로 표현할 수 있습니다.


t=f(w)

함수 f가 구체적으로 무엇인지 명확히 알 수는 없지만 

일단 다음 그림과 같이 우하향하는 함수임에는 분명합니다.


그래프의 형태로 보아 f는 유리함수일수도 있고, 지수함수일 수도 있고, 또 다른 우하향하는 함수일 수도 있습니다.


과거 수능 데이터들를 분석해 보면 

함수 f가 다음과 같이 밑이 자연상수(e)인 지수함수로 표현됨을 어렵지 않게 알아낼 수 있습니다.


t=f(w)=e^(aw+b) + c (e=2.7182⋯)





이 함수 f를 난도함수라 부르기로 합시다. 

이렇게 부르는 이유는 이 함수에 의해 결정되는 값인 t가 시험의 난도에 따라 크게 영향을 받기 때문입니다.


유의할 점은 이 함수는 경험적 추론에 의해 만들어진 함수라는 사실입니다. 

이 함수는 결코 어떤 연역적 논리에 의해 만들어진 확정적인 관계식이 아닙니다. 

이 함수는 경험적으로 축적된 데이터들을 통해 파악된 귀납적 결과에 불과합니다.

따라서 이 함수를 통한 추론 결과에는 반드시 일정 수준의 오차가 포함되어 있을 수 밖에 없습니다.


이렇게 오차의 여지가 있음에도 불구하고 이 함수가 유용한 이유는 

현재 우리가 활용하고 있는 누적석차들 모두 경험적 표본을 토대로 산출되는 결과이기 때문입니다.



현재 많은 분들께서 참고하시는 E사기준, GS기준, 그리고 칼레(오르비/kaleidoscope)기준의 

세 가지 석차백분위(누적석차)가 가장 많이 활용되고 있습니다.


이 누적석차 또한 애초 평가원의 원데이터를 통해 추론된 값이 아니라 

"확보된 표본 가운데 몇 %가 전체 몇 %"라고 하는 귀납적 추정를 통해 산출된 값입니다.


오랜기간 동안 누적석차의 표준으로 자리매김해 온 E사가 발표했던 

과거 누적석차들을 분석해 보면 E사 또한 위에서 설명한 난도함수를 만들어 놓았을 가능성이 높다는 생각이 듭니다.


어쨌든 이들 3사의 추론 결과가 평가원의 원데이터와 비교할 때 얼마 만큼의 오차를 가지고 있는지는 알 수 없습니다.


하지만 이들은 전국의 수험생들이 참조하는 자기 위치 파악의 기준으로 오랫동안 기능해 왔기 때문에 

평가원의 원데이터가 어떠한지와는 관계 없이 사실상 진짜 누적석차가 되어 버렸습니다.


대학을 지원할 때 대부분의 수험생이 믿고 참고하는 누적석차가 현실적으로는 진짜 누적석차가 될 수밖에 없습니다.


설령, 누군가가 평가원의 원데이터를 빼내 실제 누적석차를 구하여 공개한다고 해도 

수험생들이 그것을 믿고 활용하지 않는다면 의미가 없습니다.


E사 기준으로 0.3%인 학생이 실제 원데이터 기준으로는 0.58%라 하더라도 

모든 수험생들이 E사 기준을 믿고 대학에 지원한다면 

이 학생은 0.3%가 합격할 수 있는 대학에 실제로 합격할 수 있기 때문입니다.



(“그렇다면 11년도나 14년도에 있었던 누적석차 추정 실패는 무엇인가?” 하고 물으실 수도 있지만, 그것은 3개 이상의 회사가 서로 다른 누적석차를 발표해서 서로 다른 누적석차를 학생들이 혼용하여 일어난 일이라고 보는 것이 타당합니다. 그런 경우라면 보다 객관적으로 원 데이터에 가장 근접한 석차 대신에, 원 데이터보다 많이 괴리가 있는 석차가 더 많이 쓰인다면 입시에 큰 비극적 결과가 나오게 됩니다. 하지만 틀린 누적석차 하나를 모두 쓸 때는 그러한 일이 일어나지 않습니다.)



다시 본래 논의로 돌아가서

우리가 입시사이트에서 13년째 사용하고 있는 누적석차의 근간이 바로 위에서 설명한 난도함수, f(w)입니다.


함수의 input 값인 w는 평가원이 공개하는 각 과목별 1컷 점수이기 때문에

이 함수를 통해 우리는 평가원의 성적 발표 후에 

신속하게 최상위 누적석차 기준 점수인 1%의 과목별 표준점수 합을 추론할 수 있습니다.


0 XDK (+0)

  1. 유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.

  • KU 최예나 · 875576 · 21/12/13 13:47 · MS 2019

    흐앙 다운이 안대

  • 엔젤스컨설팅팀 · 1094952 · 21/12/13 13:48 · MS 2021

    크롬 브라우저에서 우클릭 후 이미지 저장하실 수 있습니다.

  • 민초 외 않먹어? · 866470 · 21/12/13 13:52 · MS 2018

    어떻게 보는건가요? 표점합으로 보면되나요?

  • 엔젤스컨설팅팀 · 1094952 · 21/12/13 13:56 · MS 2021

    학교별 환산점수로 보시는 것이 더 편하실 겁니다. J사 등 입시사이트에서 무료로 환산점수를 확인하실 수 있습니다.

  • 탈론 · 1079001 · 21/12/13 13:59 · MS 2021

    안녕하세요 엔젤스 탈론입니다.
    추가하자면 https://i.orbi.kr/00041266146 참고해주시면 감사하겠습니다.

  • 탈론 · 1079001 · 21/12/13 14:01 · MS 2021

    안녕하세요 엔젤스 탈론입니다.
    프리즘 해석법의 경우 https://i.orbi.kr/00041266146 를 기본적으로 참고해주시되 각 기관의 환산 점수를 참고해주시면 감사하겠습니다.

  • 안유진손잡고싶다 · 1016830 · 21/12/13 15:02 · MS 2020 (수정됨)

    엔젤스 너무 욕먹는 경향이있어서 아쉬움 ㅠ 알고보면 사고낸사람들 다 다원갔을텐데 ㅠ 열심히하시는 모습 응원해요

  • 탈론 · 1079001 · 21/12/13 15:40 · MS 2021 (수정됨)

    좋게 봐주셔서 감사합니다. 다만 예전에 계시던 분은 현재 다원에도 안 계신걸로 알고 있습니다.

  • 아아라라하 · 1090404 · 21/12/13 15:35 · MS 2021

    외대 ldlt과는 없나용

  • 탈론 · 1079001 · 21/12/13 15:53 · MS 2021

    아직 저희가 어느 정도 분석이 유의미한 과만 기재하고 있어서, 추후에 학과가 추가 될 수도 있을거같습니다

  • 어디든 좀 가자 · 610109 · 21/12/13 17:50 · MS 2015

    설대식에서 반영비 따라주면서 영어는 -2 감점인가요??(0.5감점한 거랑 딱 커트에 걸려서...)

    제2외 영어 감점 전부포함 411.5는 샤경영/제 가는 무리 없다고 보시는건지요...?영어 감점을 -2로 하면 410입니다.

  • 엔젤스컨설팅팀 · 1094952 · 21/12/13 18:59 · MS 2021 (수정됨)

    현시점에서 특정 점수의 합/불에 대해 단정하기는 어렵다는 점을 우선 양해 부탁드립니다.
    일단 도표상으로 저희가 표현하고자 한 것은, 예를 들어 올해 서울대식 405점이 영어감점을 감안시, 작년 402점과 유사하다는 취지였습니다.

    아시다시피 서울대 문과 모집단위는 누백으로 판단하기보다는, 표본분석을 통해 지원여부를 결정하셔야 합니다.

    현재 판단하실 수 있는 부분은,
    1) 410점~411점에서 합격기대할 수 있는 사회대 모집단위가 있을 것이라는 점과
    2) 411점대로 인문대 모집단위 쪽에서는 운신의 폭이 상당히 넓으실 것이라는 점입니다.

    구체적인 합/불은 아직 아무것도 정해진 것이 없다고 생각해 주시면 될 것 같습니다.

  • 어디든 좀 가자 · 610109 · 21/12/13 19:14 · MS 2015

    제가 인문계열 입시가 올해 처음이고 (입시판 저체가 오랜만입니다...ㅠ) 잘 모르는 것들이 많은데
    혹 중간에 말씀해주신 서울대는 누백이 아닌 표본분석으로 지원한다는게 어떤 말씀이신가요...?

  • 엔젤스컨설팅팀 · 1094952 · 21/12/13 19:44 · MS 2021

    사실 누백으로 판단하기보다는 표본분석을 하셔야 한다는 것은 서울대에만 통하는 말씀은 아니긴 합니다.

    "지난해 A대학 B학과가 누적백분위 0.2%정도에서 입결이 형성되었다"라는 사실로부터 출발하여, "올해도 누백 0.2%에서 입결이 형성되겠지"라고 생각하여 올해 누백 0.2%에 해당하는 점수로 A대학 B학과에 지원하시는 방식은 위험하다는 의미입니다.

    실제로는 올해 A대학 B학과에,
    1) 비슷한 가치를 가진 다른 학과들보다 유난히 학생들이 많이 몰려들어서, 0.2%보다 더 높은 컷이 형성될 수도 있고,
    2) 각 기관에서 추정한 0.2%대의 A대학식 환산점수가 (여러 이유로) 틀리게 되어, 예측이 잘못될 수도 있기 때문입니다.

  • 어디든 좀 가자 · 610109 · 21/12/13 20:13 · MS 2015

    그렇다면 표본 분석은 실제 지원예상 학생들의 점수를 전부 까보아서 그 안에서 내 점수를 순위로 매겨 합불을 확정짓는 다는 말씀이신가요...? 근데 모든 학생들이 점공에 참여하진 않는데, 어떻게 순위를 매길 수 있나요...? 일부 확률싸움을 포함하는 건가요?

  • 엔젤스컨설팅팀 · 1094952 · 21/12/13 20:34 · MS 2021

    네, 당연히 "모든" 표본을 다 알 수는 없고, 적당한 가산/감산이 필요합니다. 확률싸움이 되는 부분도 있고요.

  • 어디든 좀 가자 · 610109 · 21/12/13 20:35 · MS 2015

    진짜 압도적으로 남아도는 점수 아니면 특히 제점수는 많이 고민해야겟네요ㅠ

  • 엔젤스컨설팅팀 · 1094952 · 21/12/13 20:38 · MS 2021

    고민이 많으시겠지만, 411점대에서는 다양한 전략이 가능하실 것 같습니다. 너무 스트레스 받지는 마셔요.

  • 뀨경가고시프다 · 1063058 · 21/12/14 00:44 · MS 2021

    문과 많이 빡세네요...ㅠㅠ

  • 아리우스 · 965464 · 21/12/14 13:31 · MS 2020

    그럼 고대식 666은 독문이나 국교정도가 적정인건가요?
    저 표대로 보면 그런거 같은데

  • 탈론 · 1079001 · 21/12/14 15:09 · MS 2021

    고대식 666이시라면, 말씀하신대로 인어문에서 몇 과들의 컷 형성이 해당 부근에 형성될 것을 예측하고 있습니다.

  • 아리우스 · 965464 · 21/12/14 15:30 · MS 2020

    그래도 저정도 점수면 아직 가능성은 남아있는 수준인거죠?
    올해 문과입시는 진짜 어렵네요 ㅠ

  • 탈론 · 1079001 · 21/12/14 16:39 · MS 2021

    넵! 천천히 더 지켜보시면서 표본분석도 해보고 그러시면 될거같습니다.

  • 새벽기침 · 883882 · 21/12/14 13:41 · MS 2019

    합격을 기대할수있는 최소 점수가 뭐에요?

  • 탈론 · 1079001 · 21/12/14 15:09 · MS 2021

    최소한 저정도의 성적대는 가지고 있어야 연세대 경영 펑크가 예상될때, 스나이핑이 가능하다고 생각하는 지점입니다.

  • 서고강려 · 1101056 · 21/12/14 22:07 · MS 2021

    한양 917.xx 정보시스템 가능할까요..!

  • 탈론 · 1079001 · 21/12/15 10:15 · MS 2021

    앞으로 조금 더 지켜봐야하지만 폭이 날지가 관건같습니다.

  • 지게차기능사 · 1024720 · 21/12/14 22:50 · MS 2020

    한양 정책학 최소는 어느 정도 될까요?
    907이상이면 될까요?

  • 탈론 · 1079001 · 21/12/15 10:16 · MS 2021

    한양 정책의 경우 행정학을 참고하시면 될거같습니다.

  • 뚜껑이열려내외제차 · 908090 · 21/12/15 00:37 · MS 2019
    회원에 의해 삭제된 댓글입니다.
  • 탈론 · 1079001 · 21/12/15 10:23 · MS 2021

    구체적으로 성적을 봐야 알겠지만 395점이라는 성적 자체랑 연대 반영식이랑 궁합이 좋으셔서 된거같습니다.

  • lllsssm · 1099768 · 21/12/15 21:58 · MS 2021

    저 표대로라면 j사 기준 고려대 문과 677점이면 통계는 가능한 걸까요?

  • a1232221 · 1099321 · 21/12/15 23:07 · MS 2021

    고려대 인문 자연 둘다 668점인데 인문으로 가는게 맞나요 자연 가는게 맞나요??

  • 이 시대의 인재는 문과다 · 878204 · 21/12/16 18:07 · MS 2019

    서울대 교과이수 2점을 감안한 컷인가요?